Je suis ingénieur de données spécialisé dans le web scraping, le développement de pipelines de données et l’automatisation des flux de travail. Je conçois et mets en œuvre des solutions de données évolutives qui transforment des données brutes et non structurées en insights structurés et exploitables.

Mon expertise inclut la création de systèmes robustes de web scraping en Python (Requests, BeautifulSoup, Selenium), la gestion de contenus dynamiques, des considérations anti-bots et l’extraction de données à grande échelle. Je me concentre sur la fiabilité, la maintenabilité et les formats de sortie propres (CSV, JSON, Excel, ingestion de base de données).

Dans les flux de travail d’ingénierie des données, je développe des pipelines ETL/ELT pour extraire, nettoyer, transformer et charger des données dans des bases de données SQL et NoSQL. Je travaille avec des bases de données relationnelles (PostgreSQL, MySQL) ainsi qu’avec des systèmes NoSQL (MongoDB), en assurant une conception de schémas optimisée et des requêtes efficaces.

Je crée aussi des scripts Python automatisés pour les tâches récurrentes, la synchronisation des données, les intégrations d’API et l’automatisation des processus métier. Je conçois des API REST pour l’exposition des données et l’intégration entre systèmes, et je définis des KPI pour surveiller les performances et les indicateurs métier.

Ma pile technique comprend :
Python (automatisation, extraction, traitement des données)
Bases de données SQL & NoSQL
Conception de pipelines ETL / ELT
Développement de l’API REST
Docker pour la conteneurisation
ELK Stack (Elasticsearch, Logstash, Kibana) pour la surveillance et la journalisation
Parfait pour l’orchestration de workflow
Canalisations de validation et de nettoyage des données

Je priorise :
Code propre et maintenable
Architectures évolutives
Documentation claire
Livraison et communication fiables

Je suis disponible pour :
Projets de web scraping et d’extraction de données
Conception et optimisation de pipeline de données
Conception de bases de données et optimisation des requêtes
Systèmes d’automatisation
Développement d’API
Surveillance et mise en œuvre des KPI