Description

Data Engineer à La Poste Colissimo depuis 3 ans et demi.

Je suis à la recherche de nouvelles opportunités de missions Scala/Spark/Kafka... en full remote principalement. J'aimerais également monté en compétences sur du cloud (AWS, GCP, etc ...)

J'ai principalement travailler durant ces 3 ans et demi sur la conception et la maintenance applicative d'applications pour le traitement de données en temps réel.

Languages

French
Native or bilingual

Workplace preferences

Can work on-site

Paris (up to 50km)

PMU
Data Engineer
ENTERTAINMENT AND LEISURE
January 2022 - Today (4 years and 5 months)
Paris, France
• Conception et développement d’applications Spark d’ingestion de sources de données en Scala
• Ordonnancement et supervision des applications
• Développement de scénario test unitaire et d’intégration
• Migration d’applications on-premise vers AWS et test de non-regression
• Ordonnancement d’applications sur AWS via Airflow
• Développement des nouvelles fonctionnalités techniques et fonctionnelles en Scala
Spark Scala Hadoop AWS
Le Groupe La Poste
Date Engineer
LOGISTICS AND SUPPLY CHAIN
March 2018 - December 2021 (3 years and 9 months)
Issy-les-Moulineaux, France
➢ Application Spark de calcul de date et de différents délais logistique pour le pilotage opérationnel :
• Développement des nouvelles fonctionnalités techniques et fonctionnelles en Scala • Développement d’une API permettant de restituer les données d’une base Cassandra
• Refonte de l’application pour l’optimisation des performances
• Contribution dans l’identification des besoins fonctionnelles en rédigant/revoir les US
• Tests performances dans des environnement adaptés
• Développement de scénario de tests unitaires et d’intégration
• Ajout de metrics Spark et creation de dashboard à l’aide de Grafana pour le suivi de performances et comportement de l’application

➢ Application Spark de calcul de qualité de la données :
• Conception et développement de l’application (grooming, comité d’architecture, ...) en Scala
• Utilisation de la librairie elastic4s pour l’indexation ElasticSearch
• Développement d’une API permettant d’agréger et lire les données d’une base ElasticSearch avec Play Framework
• Refonte de l’application pour l’optimisation des performances
• Développement de scénario de tests unitaires et d’intégration

➢ Développement d’évolutions fonctionnelles et techniques sur des applications Spark/Scala
➢ Analyse et correction d’incidents éventuelles de production
Scala Spark Apache Kafka Cassandra Elasticsearch Play framework noSQL