Senior Data Engineer
- Optimisation du pipeline : Analyser et améliorer les pipelines de données existants pour optimiser les performances, la rentabilité et l'évolutivité.
- Transformation du pipeline : Transition des pipelines batch/snapshot vers des pipelines de gestion delta.
- Infrastructure as Code : Développer et maintenir des modules Terraform pour une gestion efficace de l'infrastructure sur AWS.
- Migration du pipeline : Migration des pipelines de données de Google Cloud Platform vers AWS en minimisant les interruptions et en garantissant une fiabilité élevée.
- Surveillance et alertes : Concevoir et mettre en œuvre des tableaux de bord et des systèmes d'alerte DataDog pour assurer une surveillance proactive des performances du pipeline de données.
- Veille technologique et innovation : Se tenir informé des nouvelles technologies et promouvoir activement les innovations et améliorations pertinentes au sein de l'équipe.
- Mentorat et soutien de l'équipe : Soutenir et guider les membres de l'équipe level junior, partager l'expertise et les bonnes pratiques, et contribuer à la croissance globale de l'équipe.
- Une expérience pratique approfondie des services AWS, notamment S3, ECS, etc., et plus particulièrement Lambda et Glue
- Des compétences avancées en Python pour la manipulation de données, la création de scripts et le développement de pipelines.
- Une solide expérience dans la création de pipelines de données distribués et évolutifs avec PySpark.
- Une maîtrise de SQL pour l'interrogation et la transformation de grands ensembles de données.
- Une Expérience dans la création et la gestion d'infrastructures avec Terraform. Terragrunt est un atout.
- Une maîtrise de la configuration et de la maintenance de pipelines pour la prise en charge des workflows d'automatisation et de déploiement.
- Une connaissance de DataDog pour la surveillance, les alertes et la création de tableaux de bord
- Autonome dans la gestion de projet, vous maîtrisez l'infrastructure de production et l'accès aux données.
- Votre esprit est ouvert à l'innovation et à l'amélioration continue.
- Pragmatique, vous trouvez des solutions concrètes et vous adaptez rapidement.
- Vous accordez une haute importance à la qualité du code et au respect des bonnes pratiques.
- Vous appréciez le travail d'équipe, communiquez ouvertement et offrez un support proactif.
- Vous assurez la qualité des tests et maintenez une approche axée sur le client.
Emplois Recommandés
Commis de Cuisine H/F
As-tu déjà rêvé de travailler sous la mer, entouré(e) de requins, de coraux et de crustacés, tout en restant à Paris ? &##128013; PRENDS TES JUMELLES ET PARS À L'EXPLORATION DE TON JOB DE RÊVE &##…
Senior Gameplay Programmer, Might & Magic Fates - Ubisoft Paris Mobile (F/H/NB)
Description de l'entreprise Localisation : Paris, France Temps de travail : Temps complet / Temps partiel Description de l'entreprise Ubisoft est une référence mondiale du jeu vidéo, av…
Comptable junior en alternance - KTS TOURISME & VOYAGES
Entreprise partenaire du secteur "Voyages" Agence de voyage à Paris dans le 8ème arrondissement, recherche un(e) comptable junior en alternance pour la rentrée de Septembre 2024. Vous aurez po…
COUVREUR (H/F)
Description du poste : Missions : dresser l'inventaire des matériaux et outils nécessaires et les acheminer sur le chantier, s'assurer de la sécurité du chantier, prévoir la gestion des g…
Technicien Cordiste H/F
OFFRE D’EMPLOI – TECHNICIEN CORDISTE H/F &##128205; Poste basé à Paris &##127970; Entreprise : ADRENALINE, spécialiste des travaux en hauteur &##128338; CDI &##128188; Démarrage : dès q…
Chargé.e de projet Scolaire et suivi des étudiants Pôle Sup Programme L’Envol - CDI - Paris H/F
// CONTEXTE Au sein d’Article 1, l’Envol est le programme de mécénat sociétal de La Banque Postale. L’Envol est constitué de 3 pôles: le pôle Lycée, le pôle Sup’ et le pôle Parrainage et événement…
Assistant(e) manager en alternance - THE KOOPLES
La Maison The Kooples est une maison de couture parisienne créée en 2007. Elle est basée à Paris et recherche pour la rentrée prochaine, une assistante de manager en alternance. Vos missions Vo…
Opticien H/F - Paris 8e
Offre emploi Opticien H/F à Paris , proposant d'excellentes conditions d'exercices. Plus d'informations sur ce poste ? Contactez-nous au 0630195406 Emploi Opticien H/F - Paris 8e Nous recruton…
"Titre du poste - CDI/CDD/Alternance/Stage" (F/H)
VOTRE RÔLE ET VOS MISSIONS We are offering a 6-month Climate Philanthropy internship starting in September 2025 at AXA Headquarters to help disseminate and promote the value of supported researc…
CHEF DE MISSION AUDIT SÉNIOR(H/F)
NEXTEP HR, filiale de Domino RH, est un cabinet de recrutement et d'approche directe spécialisé sur les recrutements CDD et CDI et en travail temporaire, qui met son expertise au service de tous types…