Marie Gosselin

Developement Python (Experte)

Developement Django

Developement ETL DI avec Talend DI

Data Engineering: Spark, Python, Cloudera Hadoop, Kafka, RabbitMQ, SQL

Data Scraping Crawling avec Scrapy, Requests, Beautiful Soup, Selenium et autres

• Développement des scripts de collecte de données, stockage et export.

• Développement des robots d’indexation (web crawler)

• Contourner les restrictions des serveurs comme Leboncoin, Seloger, PAP et autres

• Développement des scripts d’alimentation de contenu pour Facebook, Instagram, Linkedin et autres

• Data Scraping avec des outils d’automatisation comme Selenium

• Rédaction des documents : cahier des tests, manuel d’utilisation

Conception et réalisation d’une application Web pour des besoins internes, recueil des bugs et des modifications souhaitées pour la réalisation de nouvelles fonctionnalités

Poursuivre les améliorations en en créant un système de recherche par mot-clé, aussi bien avec d’autres fonctionnalités adaptées aux exigences des techniciens du lab.

• Recueille des besoins. • Développement avec Python/Django.

• Intégration flux kafka • Scraping et Crawling

• Ajout de fonctionnalités / correction de bugs.

• Recettes et mise en production. Python, Django, Javascript, JQuery, Ajax, MySQL, Bootstrap, Git, Web Scraping

Au sein du datalab Societé Générale, notre mission est de relever le challenge de récupérer, nettoyer et consolider les données qui proviennent des différents systèmes internes et des fournisseurs de données externe, afin de servir des process business qu'on développe pour les autres équipes.

Stack: Cloudera, Python, SQL, Kafka, Web Scraping