Data engineer AWS senior (F/H) - CDI
En tant que Data Engineer AWS Sénior, vous serez responsable de la conception, du développement et de l’industrialisation des pipelines de données. Vous jouerez un rôle clé dans la modernisation de l’architecture data et la mise en place des bonnes pratiques.
Vos missions
1. Analyse & conception
Cartographier les pipelines de données existants (modèles, flux, règles de transformation).
Identifier les améliorations possibles et proposer une architecture cible basée sur AWS.
Participer aux ateliers métiers pour comprendre les besoins et les traduire en solutions techniques.
2. Développement & industrialisation
Concevoir et développer des pipelines de données robustes (batch, ETL, streaming).
Nettoyer, transformer et exposer les données de manière fiable et performante.
Garantir la sécurité, la qualité et la maintenabilité des traitements.
Accompagner les équipes de développement dans la mise en œuvre de la solution.
3. Documentation & bonnes pratiques
Mettre en place les bonnes pratiques de versioning, CI/CD et tests.
Rédiger et maintenir la documentation technique.
Assurer la cohérence et la mise à jour du référentiel documentaire.
Environnement technique
AWS , Docker, Terraform
GitLab CI
Jira, Confluence
Python, PySpark, AWS Glue
S3, Apache Iceberg
RDS PostgreSQL, OpenSearch
Windows 11, Office 365, SharePoint 2016
Compétences recherchées
Techniques
Maîtrise des traitements de données : ETL, Spark, Glue (niveau 4).
Conception de pipelines batch/ETL/streaming (niveau 4).
Expertise en stockage : RDS, OpenSearch, S3 Parquet, Apache Iceberg (niveau 4).
Solides compétences en Python et Java (niveau 4).
Connaissance des services AWS (niveau 3).
Notions en DevOps : Terraform, CI/CD, automatisation (niveau 2).
Pratique des méthodologies agiles (niveau 2).
Certifications
Obligatoire sous 3 mois : AWS Developer Associate
Recommandées :
AWS Solutions Architect Associate
AWS Certified Data Engineer Associate
Emplois Recommandés
Technicienne ou technicien électricité ITC H/F - 69 (3)
Présentation de l'agence LTd compte 9 agences spécialisées en recrutement et en travail temporaire organisées par pôle d'expertise en Ingénierie, Tertiaire Haut de Gamme - Fonctions Supports s…
Orthophoniste (F/H)
Description de l'offre Mission Suite à un accroissement d'activité, le SMR Les Lilas Bleus spécialisé en neurologie située à Lyon 7 recrute un⸱e orthophonist⸱e, en CDD temps plein, dès que poss…
CDI Technical Character Artist (F/H)
Position Duties Développement et intégration des personnages : Créer et intégrer des personnages dans notre editeur de jeu, en veillant à ce qu'ils respectent les contraintes techniques et art…
MANAGER OPERATIONEL E-SERVICE (H/F/D)
Gif emploi, acteur du recrutement en intérim et CDI, référent sur les métiers techniques, depuis plus de 55 ans, cultive la proximité avec ses candidats, ses clients et les acteurs de la formation po…
Infirmier au bloc opératoire - CDI temps plein - H/F
Infirmier au bloc opératoire - CDI temps plein - H/F 25/79/MNA/9760 Vos missions en tant qu'Infirmier H/F au bloc opératoire : Rattaché(e) au chef de bloc, l'infirmier au bloc opératoire H/F contrib…
Data ingénieur H/F
Chaque moment compte. Surtout ceux que vous vivez à fond. Bienvenue chez Consort Group. Consort Group, accompagne depuis plus de 30 ans les entreprises dans la valorisation de leurs données et inf…
Bénévoles Atelier de recyclage de prothèses
Depuis 2005, Handicap International récupère des prothèses usagées. La mission des bénévoles est précieuse : ils démontent les prothèses et extraient les composants en bon état (pieds, genoux...). Les…
Technicien d’exploitation et de maintenance itinérant traitement de l’eau H/F (Région - Vallée du Rhône Loire Auvergne)
Description de l'offre Description du poste Vous êtes à la recherche d’un nouveau challenge au sein d’une structure humaine, dynamique et en pleine transformation. Dans le cadre de nos activité…
Senior Accountant
The incumbent is the deputy to the head of the accounting department. He/she will be responsible for delegated tasks in the management of accounting, taxes, internal and external audit. The positi…