Data Engineer Python / Scala / Cloud
Descriptif de l'offre
Contexte
Dans le cadre du développement d’une Data Marketplace interne pour un grand groupe international du secteur de l’énergie, nous recherchons un Data Engineer expérimenté afin de renforcer une équipe produit data.
La plateforme permet de centraliser l’ensemble du parcours data des utilisateurs : découverte de données, data quality, data governance, transformation de données, monitoring de pipelines et BI. Elle sera progressivement déployée auprès de plusieurs milliers d’utilisateurs dans un environnement international.
Le consultant interviendra sur la conception et l’évolution des pipelines de données ainsi que sur l’optimisation de la qualité et de la performance des flux.
Missions Développement et maintenance de pipelines de données en Python et Scala
Conception et évolution d’une architecture data scalable et modulaire
Gestion et optimisation des flux de données
Mise en place de processus de data quality et validation des données
Optimisation des performances des ingestions de données
Participation aux rituels agiles et aux revues de code
Documentation des choix techniques et de l’architecture
Python
Scala / Spark
Cloud : AWS et Azure
AWS : Lambda, Glue, Redshift, Step Functions, DynamoDB
Streaming : Kafka, Kinesis, EventHub, EventGrid
API REST
Git
CI/CD
Big Data Architecture
Connaissance de Langchain ou Langgraph appréciée.
Profil candidat:Profil recherché
Minimum 8 ans d’expérience en développement data
Expérience solide en :
Python
Scala / Spark
architectures data cloud
data pipelines et data quality
Capacité à travailler dans un environnement international.
Anglais professionnel requis.
A propos de l'entreprise
Gentis Recruitment SAS recherche des talents pour rejoindre son équipe.
Emplois Recommandés
Responsable Commercial - Vente et Prescription - Décoration de Luxe H/F
Le poste de Responsable Commercial - Vente et Prescription - Décoration de Luxe H/F En tant que Responsable Commercial - Vente et Prescription, vous aurez les responsabilités suivantes : * Dé…
SEO & GEO Lead
Our mission Time is money, and earning interest on cash should be effortless. We make it so, putting an end to the conflict of interest between banks and their clients. Founded in mid-2023 by …
Illustrator Design Intern
Balenciaga seeks an Illustrator Design Intern to join its Paris team in January 2026. The role involves collaborating with designers and creative directors to create bespoke illustrations and exclusiv…
Recruteur indépendant H/F
Les missions du poste #çamatchentrenous ✅ 1er Cabinet spécialisé dans le recrutement prédictif ✅ Cabinet parmi les 50 meilleurs en France ✅ 1ᵉʳ cabinet en France labellisé "engagé RSE" &##12…
Chargé de Qualité de Service (QOS) SI Antennes - BMS - Broadcast Management System - Mediagenix (IT) / Freelance
Descriptif de l'offre Dans le cadre de l’exploitation et de l’évolution du système d’information des antennes, le client utilise la solution Sherlock , basée sur la technologie Mediagenix ,…
H-F Technicien / Technicienne Télécom Radio
Description de l'offre Nous recherchons pour l'un de nos clients, société spécialisée dans les Télécoms, un Technicien / une Technicienne Télécom Radio H/F Affecté(e) à l'activité travaux téléc…
chargé·e de relation client germanophone f/h
Date de publication : 12/01/2026 Référence : BASH_8316EB Département : Direct to consumer Type de contrat : CDD full-time Date de début : 05/2026 Expérience : 0 à 2 ans Lieu de …
Un(e) « Conseiller (e) commercial(e) PP-RAC-PI-ADE »
Pour renforcer son équipe, notre agence de PARIS recrute : Un(e) « Conseiller (e) commercial(e) PP-RAC-PI-ADE » Vous souhaitez occuper un poste proposant une rémunération variable déplafonn…
Project Manager Fragrance Assistant
Fragrance Manager Intern at the Olfactory Studio Internship 6 month - Starting July 2026 RESPONSIBILITIES As our Fragrance Manager Intern, you will collaborate closely with the olfactor…
Animateur.rice Référent.e Familles en CDI
Placé-e sous la responsabilité hiérarchique de la directrice du Centre d'animation Château-Landon et dans le respect du projet associatif, vous aurez en charge la conception, le pilotage, la mise en …