Amaury Lange

• Maintenance et évolution de pipeline ELT (Extract, Transform, Load) en PySpark et Oozie pour le traitement de plusieurs dizaines de millions de DSN (Déclarations Sociales Nominatives).

• Développé un moteur RAG et un chatbot LLM en Python (LangChain, OpenAI API) avec analyse des besoins et gestion du backlog Agile, exposés via API REST Django.

• Industrialisé le déploiement sur Azure via Terraform (Infrastructure as Code) intégrant PostgreSQL avec extensions vectorielles pour le stockage d'embeddings et OCR Mistral pour le traitement de documents, avec pipeline CI/CD pour des déploiements reproductibles et sécurisés.

• Architecturé et dirigé la migration complète d'une Data Platform vers GCP en définissant l'architecture cible (zones landing/processing/serving), la stratégie IAM, et le sizing des ressources (Dataproc, GKE (Kubernetes) Cloud Storage, BigQuery Data Warehouse), réduisant les coûts opérationnels de 40%.

• Communiqué et présenté les plans de migration Data Warehouse aux parties prenantes non-techniques sur 6 mois, assurant l'alignement entre équipes business et techniques.

• Conçu et déployé des pipelines de données en temps réel avec Apache Kafka et Apache Beam (Python), afin de consolider les données de sécurité dans BigQuery.

• Orchestré les workflows ETL/ELT via Dagster avec intégration de la gouvernance Unity Catalog pour la gestion des métadonnées.