Description

Hands-on Tech Lead & Data Engineer.

Je conçois, développe et mets en production des plateformes data, APIs et pipelines fiables (data quality, tests, monitoring).

J’interviens pour structurer et industrialiser les plateformes data afin d’accélérer la mise en production de use cases et délivrer de la valeur, notamment via la mise en place de frameworks et d’outils facilitant leur développement et leur déploiement.

Industry field of expertise

Languages

French
Native or bilingual
English
Fluent
Spanish
Basic

Workplace preferences

Can work on-site

Paris (up to 50km)

BoursoBank
Hands-on Tech Lead - Senior Data Engineer
BANKING AND INSURANCE
January 2022 - Today (4 years and 5 months)
Paris, France
Contribution à la conception et déploiement de la plateforme data sur Azure en architecture Hub-and-Spoke, avec isolation réseau d'Azure Databricks via VNet Injection et connectivité privée via Azure Private Link (Private Endpoints)
Développement d'un framework Scala pour Spark, basé sur des monades IO et Result, utilise sur plus de 400 jobs batch/streaming, avec standardisation de la gestion des effets de bord, des erreurs, des métriques, du logging et des schemas
Mise en place d'Apache Airflow et d'un framework facilitant le déploiement des DAGs et la gestion automatisée des dépendances, utilisé par plus de 20 ingénieurs sur plus de 200 DAGs
Conception, développement et mise en production de plus de 50 projets en batch et streaming, notamment :
The Corner : calcul de KPIs sur les habitudes de consommation des clients pour optimiser les campagnes marketing et la négociation des remises partenaires (~534 Go/jour traite en moins de 20 mins )

Trusteer : traitement permettant de remonter des alertes en temps reel en cas d'activité douteuse sur les application web et mobile (~6500 messages/minute)

Performance Bourse : calcul des performances boursières pour plus de 8 millions de clients et exposition via une API REST sécurisée en JWT asymétrique (RS256, tokens courts renouvelés côté client)
Mise en place et maintien de chaines CI/CD pour Python, Scala, Spark, Airflow et Docker
Mise en place d'une application de monitoring et d'alerting pour les services de la plateforme Data, les API ainsi que jobs streaming & batch
Accompagnement quotidien de plusieurs Data Engineers : code reviews, support et cadrage des choix d'implémentation
Recueil des besoins auprès du metier, cadrage fonctionnel et techniques et traduction des besoins en solutions exploitables par l'équipe
Env. technique : Scala, Python, FastAPI, Spark, Airflow, SQL, Kafka, Cassandra, HDFS, Hive, MySQL, Elasticsearch, Docker, Jenkins, Terraform, Azure, Databricks & Ceph
Scala Python Spark Airflow Microsoft Azure
Numberly
Data Engineer
CONSULTING AND AUDITS
November 2020 - September 2021 (10 months)
Paris, France
Mise en place et maintien de jobs batch servant la Customer Data Platform de plusieurs clients (IKKS, OUIGO, Chanel, etc)
Mise en place d'une base CRM de test avec des données anonymisées et des données fictives (Data Augmentation) pour les phases de recette
Mise en place de jobs batch et dashboards d'automatisation de l'analyse de la performance des campagnes marketing Env. technique : Python, Spark, SQL, Docker & Kubernetes
Traitement d'urgences de production
Env. technique : Python, Spark, SQL, SSIS & Kubernetes
Python Spark SQL SSIS Kubernetes
Capgemini
Data Engineer (Chez Office Dépôt)
CONSULTING AND AUDITS
July 2020 - November 2020 (4 months)
Paris, France
Analyse du besoin client
Monitoring des applications existantes
Maintien et développement de nouvelles fonctionnalités pour les applications existantes
Rédaction de spécifications techniques d’API en RAML
Développement d’applications Mulesoft permettant de faire communiquer SAP et les outils Salesforce
Env. technique : Mulesoft, Scala, Java, SQL
Scala SQL Spark MuleSoft