architecte informatique Data - Expert Databricks (IT)

Dans le cadre de la construction d'une nouvelle plateforme data cible, nous recherchons un Lead Data Engineer / Expert Databricks pour accompagner la migration et l'industrialisation de l'environnement autour de Databricks, Spark et Power BI. Vous interviendrez sur la conception des pipelines Databricks / Spark, la structuration du modèle de données cible et la mise en place de standards de développement robustes, maintenables et industrialisés. Vous accompagnerez les équipes de développement pour garantir le respect des bonnes pratiques tout au long de la migration. Vos principales activités : Concevoir, développer et maintenir des pipelines data sous Databricks / Spark Développer les traitements en Python, PySpark et SQL Contribuer à la définition et à la mise en oeuvre du modèle de données cible Industrialiser les pipelines : standards de développement, tests, CI/CD, déploiement Mettre en place des traitements robustes, maintenables et scalables Orchestrer les traitements via Databricks Workflows / Lakeflow Jobs Contribuer à la qualité, à l'observabilité et à la fiabilité des traitements Participer au run : suivi de production, analyse d'incidents, amélioration continue Prendre en compte les enjeux de performance et de maîtrise des coûts En activités secondaires, vous participerez au cadrage des besoins avec le Product Owner et les équipes utilisatrices, contribuerez aux choix techniques de la plateforme, à l'interfaçage avec Power BI et à l'intégration de sources d'alimentation du datalake. Profil candidat: Expertise Databricks confirmée : minimum 4 ans, avec certification Databricks Très bonne maîtrise de Spark / PySpark, Python et SQL Solide compétence en modélisation de données Bonne connaissance de Delta Lake et Unity Catalog Expérience en industrialisation de pipelines data : CI/CD, tests, déploiement Expérience sur des environnements cloud publics, sans cloud cible imposé Connaissance de Terraform pour les sujets Databricks / cloud Bonne pratique de Databricks Workflows et sensibilité à l'observabilité Participation à un projet de migration ou de transformation data Compétences appréciées : Kafka pour l'ingestion vers le datalake, Lakeflow / DLT, Power BI, certification cloud Autonomie forte, leadership technique sans posture managériale, capacité à structurer, standardiser et documenter