Data Engineering

Conception, modélisation et développement d'une architecture de collecte et de traitement de données météorologiques et de qualité de l'air pour un laboratoire de recherche.

Application d'un framework rigoureux pour traduire un besoin métier critique (Scoring de micro-crédit en temps réel) en spécifications techniques d'architecture data.

Mise en place d'un pipeline de streaming pour comprendre la gestion des changements de schémas en temps réel avec Kafka Schema Registry et MongoDB.

Déploiement d'un cluster Cassandra sous Docker pour analyser des ventes de jeux vidéo, tester la haute disponibilité et maîtriser la modélisation query-first.