Description

Développeur Senior DataOps / SRE

Avec plus de 14 ans d’expérience en ingénierie logicielle et infrastructure, je suis spécialisé dans le développement Data et l’automatisation Cloud (DataOps / DevOps / DevSecOps / SRE).

J'accompagne les entreprises dans l'industrialisation et le déploiement de leurs plateformes de données, en appliquant la rigueur du SRE (fiabilité, automatisation, haute disponibilité) au monde du Data Engineering.

Mes domaines d'intervention :

DataOps & Pipelines : Développement, optimisation et sécurisation de pipelines ETL/ELT (Spark, Python) et de flux de données scalables.

Infrastructure as Code (IaC) & Cloud : Automatisation, provisionnement et gestion d'infrastructures cloud (Azure, Terraform).

Orchestration & Conteneurisation : Déploiement et administration de clusters et d'environnements complexes (Kubernetes, Docker).

CI/CD & DevSecOps : Construction de pipelines de déploiement continu et intégration des bonnes pratiques de sécurité à chaque étape.

SRE & Observabilité : Monitoring de la performance, suivi de la qualité des données et maintien en condition opérationnelle des plateformes.

Engagé, pragmatique et orienté performance, je développe des solutions prêtes pour la production, hautement sécurisées et scalables. Discutons de vos besoins !

Industry field of expertise

Languages

French
Native or bilingual
English
Fluent

Workplace preferences

Can work on-site

Paris (up to 50km), Lille (up to 10km), Nice (up to 10km), Montpellier (up to 10km), Bordeaux (up to 10km)

GENERALI
ADMINISTRATEUR BIG DATA
BANKING AND INSURANCE
March 2022 - Today (4 years and 4 months)
Saint-Denis, France
Au sein de l'équipe Datasmart de la société Generali, qui a pour but l'administration de plusieurs services comme Dataiku, Jupyter, Airflow, Snowflake...
• Administration de la plateforme DATASMAR : Gestion des incidents de production,
Gestion des habilitations et support Métier…
• Migration de la plateforme DATASMART OnPrimise CDH to Cloud Azure CDP.
• Participation aux ateliers avec tous les acteurs de la migration vers la nouvelle plateforme cloud.
• Migration : Des tables HIVE ; les scripts de production, les droits vers Apache Ranger...
• Mise en place d’une solution de backup des données de l’ABFS.
• Post Migration : Gestion des vulnérabilités signalées par le SSI, y compris la priorisation
et la résolution des problèmes de sécurité.
• Administration de la plateforme AKS :
• Migration K8S vers AKS outils et applications web et Spark.
• Tester et maintenir l’image de base Spark Cloudera.
• Mise en place et gestion des : RBAC AKS, la gestion des ressources….
• Migration des pipelines de migration CI /CD GITLAB.
• Migration des images docker de Nexus vers l’ACR, en assurant la conformité et la sécurité des images.
• Implémenter les pipelines de scan Azure Defender et Fortify.
• Administration et support des utilisateurs SNOWFLAKE.
• Participation à l’installation de SNOWFLAKE chez Generali (connexion sso, privateLink…)
• Implémentation d’un outil Snowflake ingest : pour l’ingestion des fichiers plats vers les tables SNOWFLAKE
• Synchro des tables hive vers SNOWFLAKE, avec EventGrid.
• Mise en place d’une solution de connexion SNOWFLAKE par clé, pour Jupyter, Airflow.
• Mise en place d’un Airflow sur la plateforme k8s, pour migrer les applications prod $U vers Airflow.
• Mise en place d’un azure KeyVault.
Python Spark CDP Cloudera Snowflake AKS Kubernetes Dataiku Microsoft Azure Gitlab CI/CD
Société Générale
TECHLEAD BIG DATA
BANKING AND INSURANCE
May 2021 - March 2022 (10 months)
Paris, France
Au sein de l’équipe carma de Société Générale, le projet DataHubFCCR consistait à collecter, contrôler et exposer des fichiers provenant de diverses entités pour contrôler la conformité des données.
Conception, développement et déploiement des modules pour l’application DataHubFccr.
Contribution au développement d’un système d’automatisation des tests d'acceptation fonctionnels en utilisant Cucumber.
Alimentation des tables de rejets Hive afin de créer des rapports BI Presto.
Accompagner les métiers pour la réalisation des tests sur les différents environnements.
Animer des sessions entre les développeurs pour discuter et proposer des solutions techniques.
Scala Spark Cucumber Hive Cloudera PostgreSQL
Colissimo
Développeur big data
TRANSPORTATION
January 2020 - April 2021 (1 year and 4 months)
Paris, France
Au sein de l’équipe SQUAD 2 de Colissimo (La Poste) qui prend en charge plusieurs applications qui
traite et optimise les données de livraison des colis.
▪ La réalisation de travaux d'implémentation et développement des applications temps réel, Spark
Streaming, Kafka, Cassandra ,Postgres .
▪ La réalisation de travaux d'implémentation et développement d'une application IHM
(PlayFramework, ReacJs)
▪ Exécuter les tests unitaires et d’intégration.
▪ Mettre en place des flux de données entre les systèmes en ingestion et en exposition (batch, API,
temps réel …)
▪ Support aux utilisateurs métiers.
▪ Travailler en modalité Agil.
Spark Scala Apache Kafka Cassandra Kubernetes Docker