Abdalah Maiga

Définition d’une architecture data pipeline d’ingestion de données

Développement d’un Framework d’ingestion de la donnée déployé sur AWS Glue

Migration des traitements Matillion (ETL) vers le nouveau Framework

Mise à disposition de la donnée reçue depuis des topics Kafka sur des tables athénas

Mise à disposition de la donnée à partir d’une Api Spring Boot

Chiffrement des Buckets S3 en HSM key

Mise en place d'une librairie de traitement Pyspark (Python et spark)

Mise en place d'une solution d'extraction, d'uniformisation et d'exposition de données depuis Notion, Pipedrive via des call api

Mise en place d'un outil de création et de mise à jour de tables athéna aws

Mise en place d'un outil de scheduling depuis Aws Lambda

Mise en place d'un framework de scheduling des jobs (traitements) Glue

Création de hook et d'opérateurs custom pour gérer l'alerting de fin de traitement

Mise en place d'un mécanisme de notification des équipes en fin de traitement

Mise en place d'un mécanisme de sensors capables de déclenchées les traitements une fois les fichiers reçus sur S3

Mise en place de modules terraform de :

création des rôles

création de bucket S3

création de policy

création de security group

création de l'instance Airflow sur aws

création des traitements (jobs) glue sur aws

Mise en place, évolution de chaine CI/CD Jenkinsfile

Assurer la qualité de code grâce à Sonarqube

Migration de AWS api Gateway vers TYK

Modélisation des objets métiers sur Power designer

Assurer la montée en compétence des développeurs juniors

Assurer la couverture de code sur Sonarqube Api

Optimisation et développement d'un Framework de nettoyage et calcul de la donné (DataLoader et StatCalculator)

-dev de pipelines spark-scala

-dev workflow à l'aide de Oozie

-réquettage sur Hive, utilisation de Hadoop (Hue)

-dev de fonctions analytiques

-dev de fonctions de fénetrage

-environnement linux.

Mise en place d’un dispositif de désinfection multifonctionel en période de COVID, offrant trois actions : désinfection des mains, d’un espace intérieur ou d’un objet grâce aux rayons ultraviolets

▪️ Modélisation, Conception et développement d'une application embarquée étendue au pass sanitaire.

▪️ Configuration et programmation Linux.

▪️ Contrôle et pilotage d'application à distance.

▪️ Gestion des entrées /sorties GPIO : utilisation de capteurs.

▪️ Configuration et tests d'applications.

▪️ Rédaction de la fiche technique et documentation pour la commercialisation du système

Technologies utilisées : Python, Pyqt5, Sqlite3, Panda, Git ,raspberry pi 4, Matplotlib, Rpi , VNC etc.