Über Abderrahmane
Justifiant de 8 ans d'expérience en informatique, dont 6 en Data Engineering, je conçois et déploie des pipelines de données robustes et scalables, transformant des données brutes en insights stratégiques. Mon expertise couvre l'ingestion, la transformation, le stockage et la visualisation des données, en utilisant des technologies cloud et big data.
J'interviens sur les différentes étapes du projet, de la conception au développement et à l'industrialisation.
Je collabore étroitement avec les équipes métiers pour comprendre leurs besoins et fournir des solutions adaptées, tout en assurant la performance, la scalabilité et la fiabilité des systèmes mis en place.
Au cours de mes expériences j’ai développé une expertise sur les technologies cloud et Big Data, mon expertise principale est sur différentes technologies GCP (Bigquery, Dataproc, Cloud Composer GCS) et Spark (Pyspark/Scala).
Französisch
Muttersprachlich oder zweisprachig
Englisch
Muttersprachlich oder zweisprachig
Vor Ort möglich
Paris (bis zu 30 km)
Projekt- und Berufserfahrung
- BPCEData EngineerBANKEN & VERSICHERUNGENMärz 2023 - Dezember 2025 (2 Jahre und 9 Monate)Charenton-le-Pont, FrankreichProjet Baromètre / Finance– Développement de pipelines pour traiter les opérations de 20M+ cartes de crédit.– Ingestion de données CSV/XLSX et bases externes.– Transformation et modélisation avec Spark Scala, Starlake.ai et BigQuery.– Stockage des données partitionnées en Parquet sur GCS.– Automatisation des traitements d’ingestion et de transformation avec Cloud Composer (Airflow).– Automatisation des transferts vers Azure Blob via Control-M.– Création de cubes analytiques dans Azure Synapse afin d’alimenter Power BI pour la visualisation– Participation active à la chaîne CI/CD: déploiements, tests et mise en production
- Informatique CDCData Engineer ConsultantDIGITALAGENTUREN & IT-CONSULTINGOktober 2021 - Dezember 2022 (1 Jahr und 3 Monate)Arcueil, FrankreichDataRisk :- Extraction des données depuis differentes sources (csv, excel, sql, kafka).- Création de l'ingesteur Kafka;- Qualification des données et création des différents datamart.- Déploiement et gestion CI/CD sur les différents environnements.- Migration des composants/applications depuis HDP Hortonworks vers CDP Cloudera. Environnement technique: Hadoop (hortonworks/cloudera), PySpark, Spark Sql, Kafka, Hive (dbeaver), BitBucket, Jenkins, SonarCube.
- ENEDIS (Ex ERDF)Data EngineerENERGIESeptember 2020 - September 2021 (1 Jahr und 1 Monat)ODDR :- Développement d'un produit pour les ingestion dans le datalake centralisé.- Collecte des données.- Qualification selon les spécifications métiers.- Mise a disposition sur Hive, et PowerBi.- Tuning et optimisation des jobs Spark.- Automatisation et ordonnancement des jobs. Environnement Technique : Hadoop (Hue), Spark, Scala, Hive, Hbase, Sqoop, SparkSql, Denodo, PowerBi, Agile Scrum.
Empfehlungen
Sei die erste Person, die Abderrahmane empfiehlt
Teile Deine Erfahrung aus der Zusammenarbeit mit diesem Freelancer.
Diese Freelancer passen auch zu Ihren Kriterien
Agatha Frydrych
Backend Java Software Engineer
4.7
(3)
2
Baptiste Duhen
Fullstack developer
4.6
(4)
5
Amed Hamou
Senior Lead Developer
4
(2)
7
Audrey Champion
Web developer
4.3
(3)
4
Ausbildung und Abschlüsse
- Master Big Data et fouille de donnéesUniversité Paris 82019Master's degree, Big Data and Datascience
- Master Systèmes intelligents et intelligence artificielleUniversité des Sciences et de la Technologie 'Houari Boumediène'2016
Zertifizierungen
- Professional Data EngineerGoogle Cloud Platform
- CRT020: Databricks Certified Associate Spark DeveloperDatabricks