Abderrazak Moudden

Dans le cadre des projets Datalake et Dataware, j'ai principalement travaillé sur des processus batch pour centraliser et intégrer des données issues de différentes caisses régionales. Cela a impliqué l'utilisation de tables Hive du Datalake et de tables Oracle alimentées via Kafka Connect, sur lesquelles j'ai appliqué des règles de gestion avant de les intégrer dans un Data Warehouse Group (DWG) Oracle. Ces données sont ensuite exploitées pour des calculs d'indicateurs via ETL Informatica et visualisées dans Qlik View, afin de répondre à diverses fonctions back-office, notamment le décisionnel, la détection de fraude, la lutte contre le blanchiment d'argent, ainsi que pour la création d'indicateurs de taux de paiement et de gestion des rejets

. Conception et mise en œuvre de pipelines d'ingestion de données

· Maintenance et amélioration des jobs Spark avec Scala, y compris l’optimisation des temps de traitement. Développement de jobs d’extraction et d’intégration des données entre Hive et Oracle

· Développement et optimisation de requêtes Hive pour une analyse efficace des données

· Gestion et organisation des données et fichiers sur HDFS

· Création et exécution de tests unitaires et d'intégration avec ScalaTest pour assurer la qualité et la non-régression

· Implémentation de changements de schéma évolutifs et documentation technique

· Analyse et visualisation des données

· Rédaction de spécifications fonctionnelles générales et détaillées

· Mise en place d’un utilitaire de comparaison de données avec statistiques (Comparator)

· Réalisation de revues de code et suivi des développements

· Analyse de l’existant, étude des impacts et chiffrage des évolutions

Participation à l’évolution des projets qui viseà fournir les indicateurs de suivi opérationnel nécessaire au pilotagede l’activité de livraison d’un colis sur un site, chez le client « LaPoste Colissimo ».

lisations

Conception et développement d’un système de calcul des TVA en utilisant Spark, Kafka et PostgreSQL.

Conception et participation à l’architecture des applications from scratch

Développement de micro-services CQRS avec Spark et Akka Stream en partie Command et play Framework et Akka Http en partie Query.

Conception et développement d’un système de tri, injection et génération des messages en utilisant Spark et Kafka.

Contribution à l’encadrement les nouveaux arrivant à l’équipe techniquement et fonctionnellement

Réalisation des POCs

Correction et évolutions applicatives

Etude et analyse de l’existant

Participation aux ateliers de conception technico-fonctionnels

Intégration et transformation de données

Réalisation des tests de performance

Rédaction de documents de synthèse explicatifs

Documentation technique

Support aux équipes de test