About Mouhamad
English
Fluent
French
Native or bilingual
Experience
- Videotron CanadaConsultant Senior Data engineerTELECOMMUNICATIONSAugust 2020 - October 2021 (1 year and 2 months)Montréal, CanadaGestion de la plateforme Big Data et du Data Lake- Administration de la plateforme Cloudera- Optimisation et support du développement des pipelines d’ingestion des flux en provenance des fournisseurs avec Kafka, Spark et NiFi- Conception et développement de la plateforme et notamment le décommissionnement de HDFS au profit de S3- Industrialiser les jobs en mode batch avec Spark et avec Kafka et Spark Streaming en mode temps réelEnvironnement technique : Hadoop|Spark|SparkSteaming|Hive|Oozie|S3|Kinesis|KafkaDécommisionnement de la plateforme Cloudera Vers le Cloud (Databricks, Kafka Confluent, AWS, Snowflake)- Participation à la mise en place de la nouvelle architecture Cloud- Migration des flux NIFI vers Snowflake avec Snowpipe- Migration des données de Hive vers Snowflake- Réécriture des scripts Spark notamment pour les adapter à Databricks (Delta Lake, Autoloader)- Utilisation de AWS lambda pour récupérer les données de Kinesis et les écrire dans Kafka confluentEnvironnement technique : Databricks|Spark|Spark Steaming|Deltalake|Snowflake|S3|Kinesis|Lambda|Kafka Confluent|Terraform
- ORANGEData EngineerTELECOMMUNICATIONSApril 2018 - April 2020 (2 years)Dakar, SenegalClient : Orange SénégalEvolution d’une plateforme BI SAS vers une plateforme Big DATA Hadoop HDP- Lead technique et choix des outils- Migration de tous les scripts SAS vers Spark/Scala, gestion du stockage dans Hive et ordonnancement des jobs avec Oozie- Supervision des jobs d’alimentation des données avec ELK et Grafana- Développement d’un Kpi Engine qui permet à partir d’un fichier de configuration générer des KPi pour le métier sans coder- Implémentation de nouveaux uses cases (Fraude, Localisation, Cercle relationnel, CA…)- Mise en place du pipeline de IC/DC et tenue des codes review- Formation et montée en compétence de la team (Background en Business Intelligence)Environnement technique : Hadoop|Spark|Scala|Hive|Oozie|ELK|GrafanaMise en place d’un Datalake- Analyse des besoins métiers avec le product owner et choix des outils adéquat- Implémentation du pipeline d’acquisition des données avec NiFi- ETL pour extraire et enrichir les données avec Hive et Spark- Ordonnancement du data processing avec Oozie- Supervision du data flow processing avec ELK et Grafana- Prise en charge des anomaliesEnvironnement technique : NiFi|Hive|Spark|Oozie|ELK|Grafana- Mise en place d’un système de détection de fraude et revenue assurance- Lead technique (02 Data Engineer, 04 Full stack, 01 Ops) et choix des outils- Analyse des besoins métiers avec le Product Owner- Implémentation de l’acquisition des données temps réel avec Kafka and Spark- Implémentation des modèles d’analyse des données avec Spark- Stockage des résultats avec HBase- Mise en place du pipeline de IC/DC et tenue des codes review- Prise en charge des anomalies
- DevoteamData EngineerDIGITAL AND ITJanuary 2018 - April 2018 (3 months)Paris, FranceClient : HSBC- Mise en place d’une plateforme Big Data pour la banque de détail chez HSBC- Mise en place de la plateforme hybride Big Data HDP + GCP- Mise en place de l’architecture détaillée de la solution avec DataProcEnvironnement technique : Hortonworks|GCP|DataProc
Recommendations
Be the first to recommend Mouhamad
Help this freelancer shine by sharing your experience working together.
These freelancer profiles also match your criteria
Agatha Frydrych
Backend Java Software Engineer
4.7
(3)
2
Baptiste Duhen
Fullstack developer
4.6
(4)
5
Amed Hamou
Senior Lead Developer
4
(2)
7
Audrey Champion
Web developer
4.3
(3)
4
Education
- Diplôme d'ingenieur - Big DataEFREI PARIS2015Majeure en Big Data
Certifications
- Databricks Certified Associate Developer for Apache Spark 3.0Databricks2021