Développeur Big Data / Spark (IT)

CAT-AMANIA
Lyon

Au sein du SI de notre client dans le domaine de l'énergie, le périmètre concerne le pilotage de la partie BI et notamment les points suivants :

  • Piloter le système client et les processus métier associés
  • Garantir la qualité et la cohérence des données
  • Fournir les données pour l?analyse et l?amélioration continue du système
Elle est utilisée par environ 1000 utilisateurs (analystes, experts métiers, experts SI). Le projet est composé de cinq équipes couvrant à la fois le développement des traitements fonctionnels, des reportings ainsi que la gestion des plateformes et de l?outillage. Dans un contexte de transformation du SI décisionnel, l?équipe porte actuellement des enjeux forts de modernisation des traitements Big Data, avec une migration en cours vers Spark ainsi qu?un projet de refonte complète dans le cloud basé sur Databricks à moyen terme. Profil candidat: Les missions s?inscrivent dans une trajectoire progressive : Phase 1 : Modernisation des traitements existants
  • Migration de traitements Informatica et PL/SQL vers Spark (Java)
  • Participation à l?optimisation des traitements existants
  • Maintenance corrective et évolutive des traitements PL/SQL
  • Appropriation des processus métier derrière les flux de données
Phase 2 : Refonte cloud (Databricks)
  • Participation au projet stratégique de migration vers le cloud
  • Conception et mise en ?uvre de pipelines de données sur Databricks
  • Industrialisation des traitements dans un environnement moderne
Activités principales :
  • Concevoir, développer et maintenir des pipelines de données en Spark (Java)
  • Migrer des traitements legacy vers des architectures Big Data modernes
  • Assurer la maintenance des traitements existants SQL / PL-SQL
  • Garantir la performance, la robustesse et la qualité des données
  • Participer activement au RUN et à l?amélioration continue
Activité secondaire
  • Contribution aux bonnes pratiques de développement et d?exploitation
  • Mise à jour du référentiel documentaire
  • Partage de connaissances au sein de l?équipe
  • Participation à la guilde Spark de l?équipe (choix de conception, optimisation des traitements, road map technique etc?)

Publié le 2026-05-30

Emplois Recommandés

CDD Senior 3D Art Outsourcing Manager

Grit Games
Lyon

Position Duties Grit Games est un studio de jeux vidéo basé à Lyon, récemment fondé par des seniors de l'industrie. Nous sommes un studio à taille humaine où chacun a un vrai impact, dans une ambia…

Voir les Détails
Publié le 2026-04-20

Infirmier Diplômé F/H

GROUPE ACPPA - CONSTANT
Lyon 3e

L'entreprise Rattaché au Groupe Associatif ACPPA, dans le quartier résidentiel de Montchat desservi par les transports en commun, l'EHPAD Constant, d’une capacité de 97 lits, bénéfi…

Voir les Détails
Publié le 2026-05-20

Secrétaire médicale ( H/F)- Orthopédie Centre Lyonnais de l'arthrose et du sport - Groupement Hospitalier Sud

Lyon

L'ÉTABLISSEMENT : Le Groupement Hospitalier Sud regroupe l'Hôpital Lyon Sud et l'Hôpital Henry Gabrielle. Il est une référence dans la prise en charge des urgences, des femmes enceintes, des patient…

Voir les Détails
Publié le 2026-01-28

Educateur Sportif F/H

LYON - COMMUNE
Lyon

Détails de l'offre Famille de métiers Sport Enseignement des pratiques sportives …

Voir les Détails
Publié le 2026-04-30

Ingénieur Commercial (H/F), en alternance - APOLLO CODING LIFE

MBway Lyon
Lyon

Poste MBway Lyon , école internationale de management du Bac +3 au Bac +5 recherche, pour son partenaire APOLLO - CODING LIFE , un Ingénieur Commercial H/F en alternance, à Lyon (69).  Une…

Voir les Détails
Publié le 2026-01-09

Chargé de Projet Junior (H/F), en alternance

MBway Lyon
Lyon

Poste MBway Lyon , école internationale de management du Bac +3 au Bac +5 recherche, pour l’un de ses partenaires, un Chargé de Projet Junior H/F , en contrat de professionnalisation ou apprent…

Voir les Détails
Publié le 2026-02-12

Chef de Projet Fonctionnel ERP & Trésorerie (F/H)

OCI INFORMATIQUE
Lyon

Expert de l’informatique et du digital à 360°, le Groupe OCI accompagne les entreprises sur toute la France. Fortes d’une organisation par pôle d’expertises, les équipes du Groupe OCI réalisent au…

Voir les Détails
Publié le 2026-04-30

Acheteur (H/F) en alternance

MBway Lyon
Lyon

Poste  MBway Lyon école internationale de management de Bac à Bac +5 recherche, pour l’un de ses partenaires dans le monde de l’audiovisuel et du digital, un Acheteur H/F , en contrat d’apprent…

Voir les Détails
Publié le 2026-01-22

PHC - Bactériologie - janvier à aout 2026

Lyon

L'ÉTABLISSEMENT : VOUS NOUS REJOIGNEZ Les Hospices Civils de Lyon, ce sont 13 hôpitaux publics, tous animés par une triple mission : le soin, la recherche et l'enseignement. Nous formons ensemble …

Voir les Détails
Publié le 2026-01-21

Sous-Chef·fe de Cuisine F/H - 1124

Maison Lyon pour l'Emploi
Lyon 2e

Sous-Chef·fe de Cuisine F/H - 1124 L’Institut Lyfe (ex-Institut Paul Bocuse) est une école de référence internationale qui forme, du Bachelor au Doctorat, les futur·e·s décideurs et décideuses de…

Voir les Détails
Publié le 2026-05-18