Ingénieur big data

Contexte Dans le cadre du développement de notre activité Big Data, nous recherchons un(e) Inégnieur(e) Big Data expérimenté(e) pour renforcer notre équipe et intervenir sur notre plateforme Cloudera Hadoop. Vous évoluerez dans un environnement exigeant, au cœur d'un Datalake stratégique, avec des enjeux forts de performance, de maintenabilité et de qualité de service. Vos missions Rattaché(e) au Responsable Big Data, vous aurez pour principales responsabilités : Développement & évolutions

• Prendre en charge les évolutions des données à intégrer au Datalake
• Reprendre et faire évoluer les développements existants
• Développer les traitements d'alimentation de la plateforme
• Mettre en place des extractions de données adaptées aux besoins métiers
• Optimiser les traitements existants (plateforme et usages utilisateurs)

Stack technique : Hadoop Cloudera, Hive, Impala, Spark, Python, SQL, Shell, Linux, VBA, Jupyter Expertise technique & encadrement

• Spécifier techniquement les tâches et fournir les requêtes de référence
• Réaliser des revues de code
• Accompagner et encadrer des profils juniors (alternant(e), stagiaire)
• Investiguer et effectuer du reverse engineering dans une architecture héritée complexe

Support & accompagnement utilisateurs

• Assurer le support niveau 2
• Mettre en place des guides et processus (structuration via JIRA)
• Accompagner les utilisateurs dans l'exploitation des données
• Veiller à l'application des bonnes pratiques

Performance & gouvernance

• Garantir le respect des délais dans un contexte de production à fortes attentes
• Contribuer à la maintenabilité, à la performance et à l'exploitabilité de la plateforme
• Veiller au respect des modèles référencés et contribuer à leur évolution en lien avec la Direction Technique Informatique et la Gouvernance de la Donnée

Profil recherché ✅ Compétences techniques

• Expérience confirmée (5+ ans) en développement Data / Big Data
• Excellente maîtrise de SQL (expert)
• Très bonne maîtrise de Python
• Solide expérience en Shell scripting avancé (automatisation)
• Bonne maîtrise de Spark, Hive, Impala, Hadoop (Cloudera)
• Capacité à structurer l'activité (JIRA, documentation, processus)

➕ Atouts appréciés

• Connaissance de Power BI
• Connaissance de SAS

Qualités personnelles Nous recherchons un profil :

• Rigoureux(se) et structuré(e)
• Capable d'investigation et d'analyse dans des environnements complexes
• À l'aise pour vulgariser des sujets techniques
• Doté(e) d'un excellent relationnel (développeurs, bureaux d'étude, qualifieurs, clients - groupes de protection sociale)
• Pédagogue, diplomate et orienté(e) partage de connaissances
• Attaché(e) à la documentation et à la transmission du savoir