🧩 Lead Data Engineer - Hadoop / Spark / Python (Contexte Big Data) - Freelance

Collective.work
Lyon
Taux journalier (TJM): 💶 Budget : 500 € HT/j max / 50-60 Keuros annuel (selon profil)

🧩 Lead Data Engineer – Hadoop / Spark / Python (Contexte Big Data)

🗂️ Informations pratiques
📍 Département : Lyon (69)
🗓️ Démarrage : 20/04/2026
⏳ Durée : 36 mois, reconductible
🧾 Contrat : CDI ou freelance
💶 Budget : 500 € HT/j max / 50-60 Keuros annuel (selon profil)
🧑‍💻 Télétravail : 2 jours/semaine
🧠 Séniorité : senior (+7 ans)
👤 Poste ouvert : 1
🌍 Secteur : Protection sociale / Data

🧩 Contexte

Dans un environnement Big Data critique , vous intervenez sur une plateforme Hadoop Cloudera dédiée à la gestion et à l’exploitation de volumes importants de données.

La mission s’inscrit dans un contexte de renforcement des capacités data avec des enjeux forts autour de la performance, de la maintenabilité et de l’industrialisation des traitements .

Vous rejoignez une équipe data avec un rôle clé à la fois technique et transverse , incluant du lead technique et de l’accompagnement .

🎯 Missions principales

  • Prendre en charge les évolutions et la maintenance des pipelines d’alimentation du Data Lake

  • Développer et optimiser les traitements Big Data (Spark / Hive / SQL)

  • Mettre en place des extractions de données complexes

  • Assurer un rôle de lead technique (revue de code, cadrage technique, accompagnement)

  • Participer au support niveau 2 et à la résolution d’incidents

  • Optimiser les performances des traitements et de la plateforme

  • Structurer l’activité (JIRA, documentation, bonnes pratiques)

  • Réaliser du reverse engineering sur un SI data existant

  • Accompagner les utilisateurs et diffuser les bonnes pratiques

🛠️ Environnement technique

Big Data

  • Hadoop (Cloudera)

  • Hive / Impala

  • Spark / PySpark

  • YARN

Langages & scripting

  • Python (data processing / scripting)

  • Shell avancé (bash)

  • SQL (niveau intermédiaire à avancé)

Data Engineering

  • Pipeline data (jointures, optimisation, partitionnement…)

  • Optimisation Hive / Spark

  • Gestion de fichiers HDFS

Outils

  • Linux

  • JIRA

  • VBA / Jupyter (ponctuel)

Bonus

  • Kafka

  • Zeppelin

Publié le 2026-03-18

Emplois Recommandés

Technicien de maintenance process (H/F)

Talents Industrie
Lyon

Talents Industrie, cabinet de recrutement spécialisé dans les métiers techniques, vous propose des offres d’emploi dans l'Industrie, en CDI / CDD ou intérim. Au sein du service maintenance, vous ass…

Voir les Détails
Publié le 2026-03-12

Assistant social - Pédopsychiatrie - TSA - H/F

ARHM - CH Saint Jean de Dieu
Lyon

La Fondation ARHM recrute une Assistante Sociale pour intégrer le dispositif Neurodev', un dispositif intersectoriel de pédopsychiatrie spécialisé dans la prise en charge des enfants et adolesc…

Voir les Détails
Publié le 2026-02-24

Chef(fe) de Secteur GMS

HYPERACTIV
Lyon

À propos de nous HYPERACTIV est l'agence d'intérim experte dans les métiers de la grande distribution. Forte de 10 ans d'expérience dans ce domaine, Hyperactiv intervient partout en France : avec plus…

Voir les Détails
Publié le 2026-03-04

Hôpital Lyon Sud - Infirmier(e) de recherche clinique (H/F) - Centre de phases précoces - 50 %

Lyon

Navigation Pré-entête ~ Nos sites Navigation principale Actualités Expertises La FHF En régions Emploi Annuaire Accès établissement adhérent Fil d'Ariane #Hôpital Lyo…

Voir les Détails
Publié le 2026-01-29

Operation Manager (H/F)

Market RH
Lyon

&##127757; L’entreprise Rejoignez un groupe international reconnu et spécialisé dans les solutions professionnelles de blanchisserie. Présent dans plus de 100 pays, notre client conçoit, fabrique…

Voir les Détails
Publié le 2025-09-24

Ingénieur d'étude Migration Linux/MVS (H/F)

DIGWAY
Lyon

Contexte / Projet DIGWAY recrute un(e) Ingénieur d'Études – Migration de Données (H/F) pour intervenir sur un projet client en cours, au sein d'un environnement collaboratif et stimulant. …

Voir les Détails
Publié le 2026-03-17

Développeur web, data et IA F/H (2026-162899)

Enedis
Lyon

Description de l'offre Description de l'offre Nous recrutons : Développeur·euse Transverse – Automatisation, Data & IA. Vous souhaitez mettre vos compétences au service de l’innovation et de…

Voir les Détails
Publié le 2026-03-09

Gestionnaire de copropriétés - F/H

Lyon

Le CabRH , cabinet de recrutement et d'approche directe, recrute pour son client, régie lyonnaise indépendante à taille humaine, un Gestionnaire de copropriétés expérimenté H/F pour une embauche en …

Voir les Détails
Publié le 2026-02-16

Assistant de permanence au Point Focal Régional H/F

ARS AUVERGNE-RHÔNE-ALPES
Lyon

L'Agence Régionale de Santé Auvergne-Rhône-Alpes recrute ! Le point focal régional (PFR) est défini comme le centre unique de réception des signaux de veille et de sécurité sanitaires remontés à une …

Voir les Détails
Publié le 2026-03-18

Responsable Plateforme PETRA/ Direction des Plateaux Médico-Technique (H/F)

Lyon

Navigation Pré-entête ~ Nos sites Navigation principale Actualités Expertises La FHF En régions Emploi Annuaire Accès établissement adhérent Fil d'Ariane #Responsable…

Voir les Détails
Publié le 2025-12-26