Senior Data Engineer Databricks H/F
Description de l'entreprise Agence multi spécialiste composée de 350 collaborateurs répartis en communautés d'experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (AWS, Microsoft Google), l'intelligence artificielle, la cybersécurité, la data, et l'automatisation des processus métiers. Data Driven a pour ambition d’aider ses clients à transformer la valeur de leurs données en succès durable. Nous tirons parti à la fois de notre expertise sur les plateformes technologiques les plus innovantes et de notre connaissance métier avec la meilleure combinaison d’experts pour accompagner nos clients dans leur quête d’agilité, de compétitivité et de croissance durable.
Description du poste
Rejoignez notre équipe lyonnaise dans des projets innovants, dans un environnement propice à la formation et au développement continu. Nos clients sont des grands comptes de secteurs d'activité variés (Industrie, Transport, Logistique, Banque, Assurance, Energie...). Vos missions :- Concevoir et construire des pipelines de données robustes sur Databricks , en utilisant PySpark et Spark SQL .
- Recueillir les besoins, participer aux ateliers de conception et optimiser les flux de données.
- Assurer la qualité du code et des données à travers des tests techniques, des revues de code et la gestion des anomalies.
- Contribuer à l'amélioration continue des processus par l'automatisation et l'application des bonnes pratiques.
- Participer activement aux cérémonies agiles et maintenir une veille technologique constante.
Qualifications
Nous recherchons un(e) Data Engineer doté(e) d'excellentes compétences techniques et d’une bonne capacité à communiquer et à vulgariser des sujets complexes. Vous êtes reconnu(e) pour votre esprit d'équipe, votre rigueur et votre capacité à travailler en méthode Agile (Scrum). Un niveau d’anglais minimum B2 est attendu. Compétences techniques et outils :- Maîtrise de Databricks , PySpark , Python et SQL .
- Compétences Cloud (AWS, Azure ou GCP).
- Connaissance des environnements CI/CD et DevOps .
- Expérience en orchestration avec Airflow ou Azure Data Factory .
- Connaissance des modèles de données et des technologies Spark et Scala est un plus.
- La certification Databricks Associate ou Professionnal est appréciée.
Informations complémentaires
Comment se déroule le processus de recrutement chez Devoteam ? Il comporte 2 à 3 entretiens :- Talent Acquisition Interview : l'objectif est de faire le point sur vos compétences, votre niveau d'anglais et de valider vos éléments de motivation
- Tech & Business Interview : cet entretien vise à approfondir vos compétences techniques et à vérifier leur adéquation avec nos besoins lors d'un échange avec un expert métier
- Leadership Interview : il permet d'évaluer votre potentiel, vos ambitions et d'envisager votre évolution au sein de Devoteam.
Emplois Recommandés
DevOps AWS - CDI
Salaire: 50-60k / TJM 500-600€ La mission s’inscrit au sein d'une Usine de Produits Numériques, dans un fonctionnement en mode produit (agile). Le produit vise à centraliser et exploiter des donné…
Consultant Technique Office 365 F/H
Description de l'entreprise Le groupe Coexya , leader du numérique et multi-spécialiste (conseil, intégration & développement), compte plus de 950 collaborateurs présents sur les sites de Lyon, Par…
Juriste
Company Description Bandai Namco Entertainment Europe est l'un des principaux éditeurs, développeurs et distributeurs mondiaux de contenu de divertissement pour les plateformes incluant, mais sans s'…
Econome (H/F) - CDD - Horaires continu
Les Maisons Bocuse recherchent, pour leur laboratoire de production Nord Sud Production (situé à Vaise), leur futur Econome (H/F) disponible immédiatement. Vous assurez la bonne gestion des flu…
Business Analyst (H/F)
Le poste : Nous recherchons pour l'un de nos clients grands comptes un Business Analyst pour prendre en charge des sujets de BUILD et de l'assistance fonctionnelle, dont le rôle et les responsabil…
Automaticien H/F
Le poste : Kali Group est le premier cabinet conseil dédié exclusivement au manufacturing industriel. Nous accompagnons des constructeurs de machines spéciales et leurs clients sur l'ensemble du c…
Cuisinier de collectivité H/F
Le poste : EXPÉRIENCE AU QUÉBEC - EXPATRIATION NÉCESSAIRE Lieu : Province de Québec, Canada AB Stratégies Équilibre, expert en recrutement et en expatriation, vous propose une opportunité uniq…
OPERATEUR MANUTENTIONS LOURDES (H/F/D)
Gif emploi, acteur du recrutement en intérim et CDI, référent sur les métiers techniques, depuis plus de 55 ans, cultive la proximité avec ses candidats, ses clients et les acteurs de la formation pou…
Lignard H/F/X
A propos de GENESIS RH CHAMBERY: Chez Genesis RH, on réinvente le travail temporaire ! On connecte les intérimaires avec des entreprises dynamiques à la recherche de talents dans des secteurs comme l…
Chef de secteur - travaux ferroviaire
Nous recherchons un(e) Chef de Secteur pour renforcer les équipes Lyonnaises. Véritable relais entre la direction travaux et les équipes opérationnelles, vous pilotez un périmètre d'activités (trava…