Description

Ingénieur diplômé de l'ENSIMAG, j'interviens principalement sur des problématiques de Data plateformes sur AWS et j'ai eu la chance d'accompagner plusieurs entreprises dont startup, scaleup, ou grand groupes, dans plusieurs secteurs d'activités (Banques, transport, santé) et différents contextes métiers.

Certifié AWS Developer Associate et Data Engineer Associate, je peux vous accompagner à mettre en place des pipelines de traitement de données performants sous l'écosystème AWS et vous orienter vers les services et les technologies qui conviennent le plus pour votre cas d'usage et de votre contexte.

Mes sujets de prédilections :

ETL
Datalake / Data Lakehouse
APIs
Clean Code
Infrastructure as Code
CI/CD

Industry field of expertise

Languages

French
Native or bilingual
English
Native or bilingual

Workplace preferences

Can work on-site

Grenoble (up to 50km), Lyon (up to 50km)

Bpifrance
Data Engineer / Tech Lead
BANKING AND INSURANCE
April 2023 - Today (3 years and 2 months)
Paris, France
Moderniser les projets Python en ajoutant un Dependency Manager (Poetry), des Linters, Formatters etc, pour unifier les outils des développeurs et faciliter leur travail
Rendre plus robustes les Pipelines CI/CD sur Jenkins en ajoutant des vérifications de la qualité de code et tests unitaires avant tout déploiement
Maintenance du code Spark d'ingestion et de transformation des tables.
Refactoring du code pour le rendre plus testable et réutilisable
Moderniser la partie stockage de données de la plateforme en passant du CSV vers du Parquet et Iceberg
Développer un connecteur DataGalaxy qui permet d'ajouter le Lineage des tables dynamiquement en utilisant OpenLineage.
Développement de connecteurs pour l'outil de gestion de pilotage Anaplan qui permettent d'extraire/intégrer automatiquement des fichiers de/vers AWS en utilisant l'API Anaplan.
Spark Amazon Web Services Apache Iceberg Terraform Anaplan
Free2Move
DataOps/Data Engineer
TRANSPORTATION
May 2022 - April 2023 (1 year)
Construire l'infrastructure AWS pour une pipeline de streaming avec un large volume de données (EMR, Kinesis, S3, Lambda)
Création et maintenance des pipelines CI/CD du projet (Terraform, Spark sur Scala, Lambdas sur Python)
Maintenance du code de l'application principale en Spark Streaming
Développement d'une Lambda pour surveiller des aspects métiers avec de l'alerting sur Google Chat
Mise en place de Dashboards pour surveiller la charge de l'infrastructure (EMR, Kinesis, S3,...) sur Grafana
AWS EMR AWS Kinesis Terraform Scala Spark
SANOFI
Data Engineer
PHARMACEUTICALS INDUSTRY
April 2021 - May 2022 (1 year and 1 month)
Grenoble, France
Maintenir et améliorer les jobs Spark (Scala) d'ingestion dans la plateforme
Maintenir l'orchestration des pipelines avec Stepfunctions et Lambdas (Python)
Améliorer la lisibilité du Catalog de la plateforme en mettant en place un outil qui facilite l'ajout de metadata dans le catalog Glue de la plateforme à partir d'un fichier de configuration
Enrichissement des tests unitaires et des tests E2E de la plateforme et l'ensemble de la Codebase
Maintenir et améliorer les pipelines CI/CD de la plateforme
Maintenir l'infrastructure AWS as code (Cloudformation)
Python Apache Spark AWS CloudFormation Scala Amazon Web Services