About Abderrahmane
Justifiant de 8 ans d'expérience en informatique, dont 6 en Data Engineering, je conçois et déploie des pipelines de données robustes et scalables, transformant des données brutes en insights stratégiques. Mon expertise couvre l'ingestion, la transformation, le stockage et la visualisation des données, en utilisant des technologies cloud et big data.
J'interviens sur les différentes étapes du projet, de la conception au développement et à l'industrialisation.
Je collabore étroitement avec les équipes métiers pour comprendre leurs besoins et fournir des solutions adaptées, tout en assurant la performance, la scalabilité et la fiabilité des systèmes mis en place.
Au cours de mes expériences j’ai développé une expertise sur les technologies cloud et Big Data, mon expertise principale est sur différentes technologies GCP (Bigquery, Dataproc, Cloud Composer GCS) et Spark (Pyspark/Scala).
French
Native or bilingual
English
Native or bilingual
Can work on-site
Paris (up to 30km)
Experience
- BPCEData EngineerBANKING AND INSURANCEMarch 2023 - December 2025 (2 years and 9 months)Charenton-le-Pont, FranceProjet Baromètre / Finance– Développement de pipelines pour traiter les opérations de 20M+ cartes de crédit.– Ingestion de données CSV/XLSX et bases externes.– Transformation et modélisation avec Spark Scala, Starlake.ai et BigQuery.– Stockage des données partitionnées en Parquet sur GCS.– Automatisation des traitements d’ingestion et de transformation avec Cloud Composer (Airflow).– Automatisation des transferts vers Azure Blob via Control-M.– Création de cubes analytiques dans Azure Synapse afin d’alimenter Power BI pour la visualisation– Participation active à la chaîne CI/CD: déploiements, tests et mise en production
- Informatique CDCData Engineer ConsultantDIGITAL AND ITOctober 2021 - December 2022 (1 year and 3 months)Arcueil, FranceDataRisk :- Extraction des données depuis differentes sources (csv, excel, sql, kafka).- Création de l'ingesteur Kafka;- Qualification des données et création des différents datamart.- Déploiement et gestion CI/CD sur les différents environnements.- Migration des composants/applications depuis HDP Hortonworks vers CDP Cloudera. Environnement technique: Hadoop (hortonworks/cloudera), PySpark, Spark Sql, Kafka, Hive (dbeaver), BitBucket, Jenkins, SonarCube.
- ENEDIS (Ex ERDF)Data EngineerENERGY AND UTILITIESSeptember 2020 - September 2021 (1 year and 1 month)ODDR :- Développement d'un produit pour les ingestion dans le datalake centralisé.- Collecte des données.- Qualification selon les spécifications métiers.- Mise a disposition sur Hive, et PowerBi.- Tuning et optimisation des jobs Spark.- Automatisation et ordonnancement des jobs. Environnement Technique : Hadoop (Hue), Spark, Scala, Hive, Hbase, Sqoop, SparkSql, Denodo, PowerBi, Agile Scrum.
Recommendations
Be the first to recommend Abderrahmane
Help this freelancer shine by sharing your experience working together.
These freelancer profiles also match your criteria
Agatha Frydrych
Backend Java Software Engineer
4.7
(3)
2
Baptiste Duhen
Fullstack developer
4.6
(4)
5
Amed Hamou
Senior Lead Developer
4
(2)
7
Audrey Champion
Web developer
4.3
(3)
4
Education
- Master Big Data et fouille de donnéesUniversité Paris 82019Master's degree, Big Data and Datascience
- Master Systèmes intelligents et intelligence artificielleUniversité des Sciences et de la Technologie 'Houari Boumediène'2016
Certifications
- Professional Data EngineerGoogle Cloud Platform
- CRT020: Databricks Certified Associate Spark DeveloperDatabricks