Ali Ahmed Hadid

Mission : Mettre en œuvre des différents composants de la plateforme de données massifs d’aéronautiques du client (flottes,

météo, incidents, positions)

Tâches :

Concevoir et implémenter les composants de la plateforme : ingestion, traitement, normalisation et exposition de données.

Améliorer le cadre commun (monitoring, CI/CD, API, tests, performance, qualité du code…)

Garantir la conformité aux standards du Groupe et collaborer avec les parties prenantes.

Amélioration du cadre commun (surveillance, CI/CD, tests, performance, résilience, pratiques de développement et qualité du code)

Environnement : VS Code, Docker, Kubernetes, Airflow, AWS

Langages : Python, Scala

Technologies : Sp ark , GitLab, CI/ CD, MongoDB, CloudWatch, SparkUI

Lambda, API-Gateway, S3, Jira

Systèmes : Windows, Linux, AWS

Missions :

La contribution des implémentations des différentes composant de la data platform du client.

Réalisation:

La mise en place d'une plateforme data basé sur Gitlab et Mongo db dédier au versioning des datasets des data scientists

•

Le développement des différentes micro services fastAPI

•

La maturation du code Python des notebook python de machine learning

•

La réalisation des démonstrations et des POC des nouvelles fonctionnalités développées

•

L’analyse et la réalisation des différentes tests unitaires/ intégrations des composants du projet

.

La documentation technique avec Sphinx

Mission: Analysis and development as well as support of certain applications used within Cora hypermarkets, mainly on AWS big data environments. Tasks:

• The implementation of a data platform dedicated to the customer loyalty program

• Collection of multi-source data (parquet, csv) to feed the DataLake S3

• Realization of developments, unit tests and technical recipes (Python, Spark)

• Exposing and testing the results of spark processing for the business in the Snowflake environment (Sql)

• Optimization of marketing costs and sms sent to customers

• The processing of multi-source data from the DataLake (parquet, csv)

• Configuration of parameters and calls to python functions (Yaml).

• Digitization of receipts

• Deployment and testing of developments in the AWS environment

• Participation in various agility meetings (Jira, Daily) Technical environment :

• Environment: AWS (S3, EMR, Pipeline), PyCharm, Snowflak

• Languages: Python, Sql

• Technologies: Spark, git, Jira

• Systems: Windows, AWS Ec2