You're seeing this page as if you were . The main menu is still yours, though. Exit from immersion
Yassir IdhbiYI

Yassir Idhbi

Supermalter

Senior Cloud Data Engineer Ops - Spark Python AWS

EUR 700/Tag
2 Projekte
Grenoble, FR
3-7 Jahre

Durchschnittliche Reaktionszeit: 1h

Über Yassir

Ingénieur diplômé de l'ENSIMAG, j'interviens principalement sur des problématiques de Data plateformes sur AWS et j'ai eu la chance d'accompagner plusieurs entreprises dont startup, scaleup, ou grand groupes, dans plusieurs secteurs d'activités (Banques, transport, santé) et différents contextes métiers.

Certifié AWS Developer Associate et Data Engineer Associate, je peux vous accompagner à mettre en place des pipelines de traitement de données performants sous l'écosystème AWS et vous orienter vers les services et les technologies qui conviennent le plus pour votre cas d'usage et de votre contexte.

Mes sujets de prédilections :
  • ETL
  • Datalake / Data Lakehouse
  • APIs
  • Clean Code
  • Infrastructure as Code
  • CI/CD

  • Französisch

    Muttersprachlich oder zweisprachig

  • Englisch

    Muttersprachlich oder zweisprachig

Vor Ort möglich
Grenoble (bis zu 50 km), Lyon (bis zu 50 km)

Projekt- und Berufserfahrung

  • Bpifrance
    Data Engineer / Tech Lead
    BANKEN & VERSICHERUNGEN
    April 2023 - Heute (3 Jahre und 2 Monate)
    Paris, Frankreich
    • Moderniser les projets Python en ajoutant un Dependency Manager (Poetry), des Linters, Formatters etc, pour unifier les outils des développeurs et faciliter leur travail
    • Rendre plus robustes les Pipelines CI/CD sur Jenkins en ajoutant des vérifications de la qualité de code et tests unitaires avant tout déploiement
    • Maintenance du code Spark d'ingestion et de transformation des tables.
    • Refactoring du code pour le rendre plus testable et réutilisable
    • Moderniser la partie stockage de données de la plateforme en passant du CSV vers du Parquet et Iceberg
    • Développer un connecteur DataGalaxy qui permet d'ajouter le Lineage des tables dynamiquement en utilisant OpenLineage.
    • Développement de connecteurs pour l'outil de gestion de pilotage Anaplan qui permettent d'extraire/intégrer automatiquement des fichiers de/vers AWS en utilisant l'API Anaplan.
    Spark Amazon Web Services Apache Iceberg Terraform Anaplan
  • Free2Move
    DataOps/Data Engineer
    TRANSPORTWESEN
    Mai 2022 - April 2023 (1 Jahr)
    • Construire l'infrastructure AWS pour une pipeline de streaming avec un large volume de données (EMR, Kinesis, S3, Lambda)
    • Création et maintenance des pipelines CI/CD du projet (Terraform, Spark sur Scala, Lambdas sur Python)
    • Maintenance du code de l'application principale en Spark Streaming
    • Développement d'une Lambda pour surveiller des aspects métiers avec de l'alerting sur Google Chat
    • Mise en place de Dashboards pour surveiller la charge de l'infrastructure (EMR, Kinesis, S3,...) sur Grafana
    AWS EMR AWS Kinesis Terraform Scala Spark
  • SANOFI
    Data Engineer
    PHARMAZEUTISCHE INDUSTRIE
    April 2021 - Mai 2022 (1 Jahr und 1 Monat)
    Grenoble, France
    • Maintenir et améliorer les jobs Spark (Scala) d'ingestion dans la plateforme
    • Maintenir l'orchestration des pipelines avec Stepfunctions et Lambdas (Python)
    • Améliorer la lisibilité du Catalog de la plateforme en mettant en place un outil qui facilite l'ajout de metadata dans le catalog Glue de la plateforme à partir d'un fichier de configuration
    • Enrichissement des tests unitaires et des tests E2E de la plateforme et l'ensemble de la Codebase
    • Maintenir et améliorer les pipelines CI/CD de la plateforme
    • Maintenir l'infrastructure AWS as code (Cloudformation)
    Python Apache Spark AWS CloudFormation Scala Amazon Web Services

Empfehlungen

Diese Freelancer passen auch zu Ihren Kriterien

AgathaA

Agatha Frydrych

Backend Java Software Engineer

4.7

(3)

2

BaptisteB

Baptiste Duhen

Fullstack developer

4.6

(4)

5

AmedA

Amed Hamou

Senior Lead Developer

4

(2)

7

AudreyA

Audrey Champion

Web developer

4.3

(3)

4

Ausbildung und Abschlüsse

  • Diplôme d'ingénieur, Ingénierie des Systèmes d'Information
    Grenoble INP - Ensimag
    2019
    Diplôme d'ingénieur, Ingénierie des Systèmes d'Information

Zertifizierungen

Fähigkeiten

Kategorien