Descriptif de la mission :

Nous recherchons un LEAD DATA PLATFORM ENGINEER

Profil recherché
-Expérience significative (5 à 8 ans) en tant que Platform Engineer ou Data Engineer, avec des réalisations concrètes dans la mise en place de plateformes de données.
-Maîtrise d’un environnement cloud, idéalement Microsoft Azure ou Microsoft Fabric.
-Une expérience dans la conception d’une plateforme d’ingestion de données développée en interne serait un plus.

Missions principales:
-Conception et développement de la plateforme d’ingestion
-Concevoir et développer une plateforme d’ingestion de données générique en Python, en tirant parti des technologies Microsoft Fabric et Azure.
-Automatiser les pipelines de données pour les phases d’ingestion, de transformation et de chargement.
-Implémenter des pratiques DevOps afin d'assurer la qualité, la fiabilité et la scalabilité de la plateforme.

Gestion de l’infrastructure et des outils:
-Déployer et administrer l’infrastructure sur Microsoft Fabric à l’aide de conteneurs Docker et d’outils d’orchestration.
-Configurer et maintenir les outils de transformation et de modélisation des données (notamment DBT), en étroite collaboration avec les Analytics Engineers.
-Mettre en place des processus CI/CD pour automatiser les déploiements, et développer des tests unitaires et d’intégration.
-Définir des stratégies de supervision (monitoring) et d’alerte pour anticiper et résoudre les problèmes de performance ou de fiabilité.

Compétences requises:
-Expertise technique
-Excellente maîtrise de Python et de son écosystème (poetry, pytest, pandas, etc.).
-Expérience solide avec Docker et l’orchestration de conteneurs dans un environnement Azure.
-Bonnes compétences en SQL et en modélisation de données.
-Maîtrise de Git et des outils de gestion de versions.
-Sens aigu du software craftsmanship.
-Connaissance approfondie des principes DevOps et des outils de CI/CD.
-La maîtrise de Microsoft Fabric constitue un atout.

Qualités personnelles:
-Esprit d’équipe et sens de la collaboration.
-Autonomie, rigueur et esprit d’initiative.
-Capacité à vulgariser des sujets techniques auprès d’un public varié.
-Curiosité technologique et veille active.

Environnement Technique

DevOps

Docker

Microsoft Azure

Python