Über Bassirou
Spécialisé dans les projets de migration de données, j'ai mené avec succès plusieurs migrations d'infrastructures on-premises vers le Cloud et vice versa, ainsi que des transitions entre diverses technologies de données. Mon expertise inclut la migration de pipelines de données, de processus ETL et d'outils d'orchestration, ce qui a permis de réduire les coûts de manière significative, d'au moins 30 % dans mes projets précédents.
Je possède de solides compétences en Cloud (GCP, AWS), SQL, DBT, Python, Scala, Spark et pipelines de streaming (Kafka, PubSub).
Je rends vos pipelines de données robustes, rapides et économiques grâce à ma compréhension approfondie des systèmes de bases de données, mon approche pilotée par les tests et l'automatisation via CI/CD. Je suis orienté business, prenant en compte les besoins métiers pour créer les meilleures solutions.
Compétences clés :
- Migration de données : On-premises vers Cloud, Cloud vers on-premises, transitions technologiques (par exemple, Spark vers DBT, Nifi vers Airflow)
- Technologies de données : Apache Spark, DBT, Apache NiFi, Kafka, Apache Airflow, Dataproc, Hive, HDFS
- Cloud : GCP, AWS, Cloud Run, AWS Lambda
- Langages de programmation : Python, Scala, SQL, Java
- CI/CD & Automatisation : Gitlab CI/CD, Github Action, Ansible, Jenkins, Terraform
- Visualisation de données : Power BI, Qlik
- Gestion de bases de données : BigQuery, Cassandra, Solr, MongoDB, ElasticSearch
- Traitement en batch et en temps réel avec Spark, DBT, Kafka, PubSub
- Architecture de données
- Modélisation de données
Französisch
Muttersprachlich oder zweisprachig
Englisch
Verhandlungssicher
Vor Ort möglich
Paris (bis zu 50 km), Nantes (bis zu 50 km), Rennes (bis zu 50 km), Lyon (bis zu 50 km)
Projekt- und Berufserfahrung
- LegallaisSenior Data EngineerBAUWESENNovember 2023 - Februar 2024 (3 Monate)Caen, FrankreichObjectif de la mission : Mise en place des flux d'ingestion et de traitement des données Legallais via NIFI, Spark, Airflow pour alimenter le Datalake sur Google Cloud Platform et Qlik pour la Data Visualisation.Réalisations :
- Ingestion des sources de données via NIFI dans le Datalake au format Parquet.
- Implémentation des premiers tests unitaires du code Spark avec la librairie Scalatest.
- Configuration des applications Spark dans différents environnements (dev et prod).
- Mise en place de l'ensemble du flux Logistique avec la création des modèles pour la visualisation des données.
- Planification des tâches à l'aide d'Airflow Python.
- Implémentation d'une bibliothèque Airflow pour gérer les lancements de clusters.
- ORANGESenior Data EngineerTELEKOMMUNIKATIONMai 2024 - Heute (2 Jahre und 1 Monat)Issy-les-Moulineaux, FrankreichObjectif de la mission : Migrer from scratch tous les pipelines de données de Cloudera Hive, HDFS, Hadoop vers GCP BigQuery, DBT, GCS, Composer (Airflow), PubSub.Réalisations :
- Acquisition de données sources avec Cloud Function, PubSub, GCS.
- Implémentation d'un pipeline de routage avec Airflow (Python) pour router les fichiers sources vers les projets de destination.
- Développement d'une librairie Python pour charger des données dans BigQuery selon les cas d'utilisation.
- Écriture de DAGs Airflow en Python pour planifier les traitements de données.
- Transformation des données brutes en data marts avec DBT.
- Développement de pipelines CI/CD avec GitLab CI/CD.
- Automatisation de la build des ressources GCP avec Terraform.
- Collaboration étroite avec le métier afin de mieux cerner les besoins et proposer des solutions adaptées.
- KeringKering Big Data DeveloperLUXUSGÜTERDezember 2020 - April 2024 (3 Jahre und 5 Monate)Paris, FrankreichObjectif de la mission : Mise en place des flux d’ingestion et de traitement de données via NIFI, Spark, Kafka, Airflow, exposées dans des caches (Cassandra, Solr) à travers une API (Node.js).Réalisations :
- Migration des traitements vers le Cloud AWS.
- Traitement en lots et en temps réel via Kafka et Spark.
- Déploiement des applications Spark en temps réel avec Jenkins.
- Anonymisation des informations clients conformément au RGPD.
- Automatisation et intégration continue
Empfehlungen
Diese Freelancer passen auch zu Ihren Kriterien
Agatha Frydrych
Backend Java Software Engineer
4.7
(3)
2
Baptiste Duhen
Fullstack developer
4.6
(4)
5
Amed Hamou
Senior Lead Developer
4
(2)
7
Audrey Champion
Web developer
4.3
(3)
4
Ausbildung und Abschlüsse
- Classe préparation ScientiqueINSA Hauts de France2016
- Ingénieur en Informatique Option Big DataInstitut National des Sciences Appliquées (INSA) de Rennes2019
Zertifizierungen
- Google Cloud Professional Data EngineerGoogle2021