Developpeur DATA Python - Freelance
Nous recherchons pour un client un Developpeur DATA Python pour travailler sur une plateforme Hadoop.
L'objectif de la mission est de réaliser et maintenir les développements nécessaires à l'alimentation de la plateforme Hadoop, à la mise en place d'extractions et à l'accompagnement des utilisateurs.
Compétences Techniques :
- création d'arborescence
- copie de fichier vers hadoop
- lancement d'un spark-submit avec les bons paramètres / tunning
- Lire et comprendre du shell
Python : Python pour faire du scripting + nettoyage de données
PySpark : Savoir développer une pipeline de données avec des jointures, du paramétrage (braodcast, repartition, coalesce)
Différence entre spark2 et 3
SQL : Connaissance d'un CTE et requete
Hadoop : Utilisation de Hive, comprendre la différence entre une table externe et managée,
Emplois Recommandés
Assistant Commercial en Gestion de Patrimoine (H/F), en alternance
POSTE Ipac Bachelor Factory Lyon, école de commerce allant du post-bac au Bac +3 recherche, pour l’un de ses partenaires, un Assistant Commercial en Gestion de Patrimoine H/F, en contrat d’appren…
Alternance - Ingénieur PMO F/H
Description de l'offre Edvance, filiale d'EDF et Framatome, réalise les projets d'un nouveau nucléaire sûr et performant à travers le monde pour construire un avenir neutre en CO2. Son rôle : ê…
Magasinier PUI - CDD temps plein - H/F
Magasinier PUI - CDD temps plein - H/F 26/70/SBE/4565 Sous la responsabilité du Pharmacien Gérant, vous contribuez à la logistique de la pharmacie, à son approvisionnement, à la gestion des stocks et …
Convoyeur (H/F)
En tant que convoyeur(euse), vous aurez les responsabilités suivantes : Assurer le convoyage de véhicules légers, poids lourds et super lourds entre différentes agences. Acheminer les véhic…
Développeur Python (IT)
Nouvelle opportunité freelance ? Python / AWS Profil recherchéDéveloppeur Python / Fullstack orienté AWS Stack & environnement80% Python 20% AWS Architecture microservices (SQS, SNS) Localisa…
Ingénieur d'études Fibre Optique H/F - 69 (2)
Présentation de l'agence LTd compte 9 agences spécialisées en recrutement et en travail temporaire organisées par pôle d'expertise en Ingénierie, Tertiaire Haut de Gamme - Fonctions Supports s…
Relocate to Greece & Work From Home! French Speakers
Ready to relocate and work remotely from beautiful Greece? Join our team as a Customer Support Advisor fluent in French . Responsibilities: Support customers by phone, email, or…
Admin Windows H/F
Description de l'entreprise HELPLINE est spécialisée dans l’infogérance du support utilisateur et la mise en œuvre d’une expérience collaborateur augmentée par l’IA, où l’expertise humaine et la …
Adjoint au manager fruits et légumes H/F
Votre mission principale : tre le relais de l'esprit Commerçant Autrement En collaboration avec votre manager, vous développez les compétences et les savoir-faire de votre équipe ! Coordinat…
Architecte d'entreprise SI (F/H)
À propos d’Atos Atos est un leader international de la transformation digitale avec environ 78 000 collaborateurs et un chiffre d’affaires annuel d’environ 10 milliards d’euros. Numéro un euro…