Description

Data Engineer Senior, j'accompagne les grands comptes (Caisse des Dépôts, Stellantis, RTE) dans la conception et l'industrialisation de leurs plateformes Data, de l'ingestion à la valorisation.

🛠️ Stack technique :

Cloud Azure : Data Factory, Databricks, Synapse, DevOps, Delta Lake

Big Data : Spark, Hadoop, Kafka, Hive

Langages : Python, Java, SQL

CI/CD : Azure DevOps, Jenkins, Git, Control-M

💼 Ce que je propose :

Conception de pipelines ETL/ELT scalables

Architecture de Data Lakes (Azure & on-premise)

Migration vers le Cloud Azure

Optimisation Spark & coûts Cloud

Mise en place de CI/CD data

🏆 Dernières missions :

Lead Data Engineer à la Caisse des Dépôts (projet Prioréno — cartographie énergétique nationale), précédemment chez Stellantis et RTE.

Languages

French
Native or bilingual

Workplace preferences

Can work on-site

Paris (up to 50km)

Caisse des dépots
Lead Data Engineer
September 2023 - April 2026 (2 years and 7 months)
Domaine d'intervention : Conception et développement de workflows Databricks pour le traitement et l'analyse de données volumineuses Création et optimisation de pipelines Azure Data Factory pour l'ingestion, la transformation et l'orchestration de données Amélioration des processus CI/CD liés aux pipelines de données via Azure DevOps (gestion des versions, automatisation des déploiements) Appels d'API REST pour la collecte de données énergétiques (ENEDIS,GRDF) Modélisation et structuration des données dans Azure Data Lake et Delta Lake
Caisse des Dépôts
Lead Data Engineer
July 2021 - July 2023 (2 years)
omaine d’intervention :
Mise en place des données géographique
Mise en place de Producer/Consumer Kafka
Réalisation des tests unitaires python
Automatisation des traitement Spark
Création des job Jenkins pour l’intégration continue
Documentation des scripts (.doc, confluence)
Gestion du versionning des différents programmes développés (git)
Développement des scripts python pour la supervision des traitements
Analyse des résultats générés
Construction automobile
Data Engineer
May 2019 - April 2021 (1 year and 11 months)
Profil de mission: Le projet consiste à caractériser les sollitations engendrées par les
clients sur les véhicules. réaliser une représentation statistique d’un scalaire distribué
sur une population donnée. Il apporte la distribution d’usage en clientèle (nombre de
coups de freins, nombre d’O/F porte, etc .). Un profil de mission permet donc de
justifier un choix de conception et le besoin devalidation associé.
Domaine d’intervention:
Mise en place en place des traitements pour l’ingestion des données dans un
Datalake (réception, Transformation, ingestion
Conversion de données décodées en données exploitable en utilisant des scripts
python Documentation des scripts