You're seeing this page as if you were . The main menu is still yours, though. Exit from immersion
Iheb ChorfiIC

Iheb Chorfi

Supermalter

Tech Lead Data Engineer AWS

€800/day
4 projects
Paris, FR
8-15 years

Average response time: 1 hour

About Iheb

● Tech Lead et passionné par le domaine de la data.
7 ans d'expérience, j'ai travaillé sur plusieurs uses cases en tant que data engineer senior et tech lead (Energie, Restauration, Automobile, Banques).

● Je capitalise une bonne expérience dans la conception et l'implémentation des solutions scalables, fiables et maintenable déployées sur le Cloud/On-premise afin de répondre aux différents besoins métiers (ingestion, stockage, calcul, exposition des données).

● J'ai développé un bon relationnel avec les data architecte pour définir et valider ces solutions mais aussi avec les PO et les parties prenantes du projet pour identifier les besoins et définir les roadmap techniques et le backlog sur les prochains mois.

● Je fais monter en compétence aussi les data engineer de mon équipe pour qu'ils soient autonomes et fonctionnels.

● Adepte des méthodes AGILES et sur la qualité du code, je n'ai pas cessé d’expérimenter de nouvelles techniques et technologies dans le but de toujours apporter de meilleurs résultats.
  • French

    Native or bilingual

  • English

    Native or bilingual

  • Arabic

    Native or bilingual

Can work on-site
Paris (up to 50km)

Experience

  • Engie,
    Tech Lead Data Engineer
    March 2023 - Today (3 years and 3 months)
    France
    Mise en place d'une plateforme AWS et Databricks pour automatiser le processus de facturation des clients d'ENGIE B2B.
    • • Contribuer au design et à l'implémentation des pipelines de traitement de données scalables (nettoyage de la donnée, partitionnement, transformation, normalisation...)
    • • Contribuer au design et à l'implémentation du moteur d'orchestration avec AWS Step Functions, Lambda, SQS et EventBridge pour automatiser le processus de facturation.
    • • Développer le job ETL avec Databricks pour la récupération, la complétude et l'agrégation des données de consommation énergétique (courbe de charge).
    • • Développement d'une solution de suivis en temps réel du cycle de facturation.
    • • Concevoir et mettre en place des APIs pour exposer les données, en utilisant API Gateway et Lambda.
    • • Contribuer au développement et à l'industrialisation de solutions Big Data dans un environnement Cloud.
    • • Développer l'« infrastructure-as-code », des tests logiciels et des workflows CI/CD sur la plateforme (terraform, github actions).
    • • Identifier les problématiques métiers et les traduire en problématiques Data.
    • • Monitorer et optimiser les couts de la plateforme
    • • Manager l'équipe de 4 Data Engineer et garantir la montée en compétences des différents collaborateurs sur tous les aspects liés au Data Engineering et de manière plus transverse sur l'approche « Data-driven ».
    Technologies: AWS, Databricks (DeltaLake), Athena, Lambda, Elasticache, API Gateway, S3, Step function, EventBridge, DynamoDb, Terraform, Github Actions
  • EDF Renouvelables
    Tech Lead AWS
    ENERGY AND UTILITIES
    June 2019 - Today (7 years)
    Paris, France
    Construire un datalake des données de parcs éoliens et solaires d’EDF Renouvelabes collectés en temps réel sur AWS dans le but de monitorer et évaluer la production énergétique en US/Europe.
    ● Construire un data lake sur S3 des données analytiques pour les parcs solaires et éoliens.
    ● Mettre en place un pipeline pour l’ingestion des données à large échelle et de sources hétérogènes (ingestion, normalisation, data quality, curation, KPI).
    ● Gérer une équipe de 5 data engineer et formation des parties prenantes du projet
    ● Elaboration de la roadmap technique pour la répondre aux besoins métiers (Product Owner & Business Specialists)
    ● Définition des besoins fonctionnels avec les équipes US/Europe.
    ● Utiliser une approche Infrastrcture As a Code en utilisant Cloudformation/CDK pour une meilleure maintenabilité des ressources.
    ● Déploiement de la solution sur AWS avec une approche CI/CD.
    ● Monitorer l’opérabilité de l’environnement de production ainsi que les environnement plus bas (Staging, Test, Sandbox).
    ● Construction des KPI pour monitorer la production énergétique (Batch & Realtime) sur des visualisation Tableau et Grafana.
    AWS Tech Lead Python AWS Lambda AWS S3 CI/CD Spark Amazon RDS Amazon Redshift AWS Kinesis Airflow DevOps Docker Scrum
  • EDF Renouvelables,
    Tech Lead Data Engineer
    June 2019 - February 2023 (3 years and 8 months)
    France
    Conception et pilotage d'un datalake sur AWS destiné à la centralisation des flux en temps réel des parcs éoliens et solaires d'EDF Renouvelables, dans l'objectif d'une supervision optimale et d'une évaluation précise de la production énergétique en US/Europe.
    • • Développement et déploiement d'un pipeline d'ingestion de données hétérogènes à large échelle. Ce processus couvre la normalisation, qualité de données, la curation et la définition des KPI.
    • • Conception et mise en place d'un datalake sur S3 axé sur l'analyse des données des parcs solaires et éoliens avec AWS.
    • • Direction d'une équipe de 5 data engineer tout en assurant la formation technique des parties prenantes du projet.
    • • Élaboration et mise en œuvre de la roadmap technique en collaboration étroite avec les Product Owner & spécialistes métiers.
    • • Mise en place et application de l'approche IAS "Infrastructure As Code" à travers Cloudformation/CDK, visant une gestion optimisée et maintenabilité des ressources.
    • • Déploiement de la solution sur AWS avec une approche CI/CD, garantissant une mise en production fluide et fiable.
    • • Monitorage en continu des environnements de production et des environnements annexes (Staging, Test, Sandbox), garantissant leur opérabilité.
    • • Construction des KPI pour monitorer la production énergétique (Batch & Realtime) sur des visualisation Tableau et Grafana.
    Technologies: AWS, Glue Spark, Athena, ECR, Lambda, S3, CodePipeline, Step function, RDS, Redshift, DynamoDb, InfluxDB

Recommendations

Be the first to recommend Iheb

Help this freelancer shine by sharing your experience working together.

These freelancer profiles also match your criteria

AgathaA

Agatha Frydrych

Backend Java Software Engineer

4.7

(3)

2

BaptisteB

Baptiste Duhen

Fullstack developer

4.6

(4)

5

AmedA

Amed Hamou

Senior Lead Developer

4

(2)

7

AudreyA

Audrey Champion

Web developer

4.3

(3)

4

Education

  • Master 2 en Data Science
    Université Lyon 1 Claude Bernard
    2017
  • Ingénieur en systèmes d'informations et technologies
    Ecole Nationale Supérieure d'Informatique
    2016

Skill set

Categories