About Erwan
Data Engineer & Architecte (logiciel / data / infra)
French
Native or bilingual
English
Native or bilingual
Ukrainian
Conversational
Experience
- CLSData Platform Engineer — Product OwnerSOFTWARE PUBLISHINGJune 2023 - Today (3 years)Toulouse, FrancePlateforme Big Data pour l’analytique maritime (AIS) : ingestion, stockage et requêtage à l’échelle. Je travaille sur la fiabilité, la performance et le coût de l’écosystème (batch & streaming), avec un fort volet observabilité et industrialisation Kubernetes.Réalisations clés• Modernisation du lakehouse : schémas évolutifs, gestion des partitions et compaction, gouvernance légère, migration progressive vers des formats de table modernes.• Optimisation Spark/Trino : partitionnement pertinent, tailles de fichiers, réduction du skew, tuning shuffle/cache, règles SQL, stratégie de tri/cluster pour accélérer les scans sur données AIS.• Pipelines streaming (Kafka + Spark Structured Streaming) : reprise contrôlée, backpressure, reprocessing, SLA, runbooks d’exploitation.• Industrialisation sur Kubernetes : Spark Operator, images propres, CI/CD, secrets, stockage objet, chart Helm• Observabilité & fiabilisation : métriques/logs/traces, tableaux de bord (perf & coûts), alerting, SLO/SLA, durcissement des bonnes pratiques (tests, revues, documentation concise).Stack & pratiquesSpark, Trino, Kafka, Kubernetes/Spark Operator, Docker, S3/MinIO, Iceberg/Delta, Hive/Parquet ; Grafana/Prometheus/ELK ; Helm/Helmfile ; TerraformScala, Java • CI/CD GitLab/GitHub • Perf & optimisation, DDD
- Living@ObjectData EngineerSOFTWARE PUBLISHINGJune 2020 - July 2022 (2 years and 1 month)Toulouse, FranceÉquipe Data Collection (pilier produit) pour de grands opérateurs télécom : conception et mise en œuvre d’un nouveau collecteur temps réel, industrialisation et outillage, avec de très forts volumes (To/jour) et une exigence de zéro perte.Réalisations clés• Architecture & développement du nouveau collecteur, puis industrialisation (routines, packaging, déploiement), pilotage technique de l’équipe. • Déploiement ~50 projets (sur ~250 en prod) en remplacement progressif de l’ancien collecteur. • MCO de l’existant (anciens collecteurs) et outils utilitaires : copieur de bases haut débit/haute compatibilité, outil de synchro “type rsync” adapté métier. Stack & pratiquesScala/Java/Python, Spark, Kafka, Hadoop/HDFS (Cloudera), ClickHouse, PostgreSQL, MySQL, Impala, Bash • Optimisation perf & algos, CI/CD, qualité et fiabilité d’ingestion.
- Capgemini DEMS France S.A.SStageCONSULTING AND AUDITSNovember 2019 - April 2020 (6 months)Toulouse, FranceProjet tour de contrôle aérien (petits à grands aéroports).Contexte à fortes contraintes de performance et de compatibilité : parc matériel/logiciel ancien (Linux 2.6, OpenGL 2.0, 512 Mo RAM). Équipe de 6 personnes.Réalisations clés• Conception d’un moteur 2D optimisé pour le rendu radar et intégration dans l’app existante.• Passage de 10–50 FPS (selon charge) à 60 FPS (limite système) après migration du rendu.Stack & pratiques : C/C++, GLSL, Qt, Bash/Python • OpenGL • Architecture & techniques de rendu.
Reviews
Recommendations
Be the first to recommend Erwan
Help this freelancer shine by sharing your experience working together.
These freelancer profiles also match your criteria
Agatha Frydrych
Backend Java Software Engineer
4.7
(3)
2
Baptiste Duhen
Fullstack developer
4.6
(4)
5
Amed Hamou
Senior Lead Developer
4
(2)
7
Audrey Champion
Web developer
4.3
(3)
4
Education
- IngénieurEPITECH - European Institute of Technology2020
- BAC Pro SENLycée Renne bonnet2014