Data Engineer (>5 ans) - GCP / Spark / BigQuery / Terraform @ Médias @ Paris - Freelance

Taux journalier (TJM): TJM 530 € légèrement négociable selon profil

Dans le cadre du développement d’une plateforme data stratégique au sein d’un environnement digital à fort volume de données, vous interviendrez au cœur de la plateforme data pour concevoir, industrialiser et faire évoluer des pipelines de traitement et des infrastructures data scalables.

Vous rejoindrez une équipe dédiée à la centralisation et à la valorisation de données issues de sources multiples, avec des enjeux forts de performance, de gouvernance, de sécurité et de conformité.

Vos missions principales

• Participer aux phases de conception, planification et réalisation des solutions data avec l’équipe

• Concevoir, développer et maintenir des pipelines data robustes et scalables

• Collecter, centraliser et structurer des sources de données hétérogènes

• Organiser et optimiser le stockage des données

• Mettre en place et maintenir des infrastructures data scalables capables de gérer de forts volumes

• Assurer la qualité, la sécurité et la conformité des données

• Participer aux initiatives de gouvernance data

• Déployer et maintenir les workflows CI/CD

• Accompagner les équipes dans l’exploitation et le requêtage des données

• Appliquer et diffuser les bonnes pratiques data engineering

• Contribuer à la documentation technique et à la veille technologique

• Participer à l’amélioration continue des environnements data

L’environnement technique s’appuie notamment sur Python, Spark, SQL, Airflow, Delta Lake et Google Cloud Platform.

Profil recherché

• Niveau d’expérience : profil senior avec minimum 5 ans d’expérience significative en Data Engineering (environnement data à grande échelle)

• Très solides compétences en data engineering : structures de données, architecture data, conception logicielle

• Expérience confirmée dans la conception et la mise en production de pipelines data

• Maîtrise du cloud Google (GCP)

• Expérience avec BigQuery et catalogues de données type Dataplex / Universal Catalog

• Excellente maîtrise de Python et SQL

• Expérience avancée avec Apache Spark

• Bonne maîtrise des architectures data lake / Delta Lake

• Expérience en Infrastructure as Code avec Terraform et Terragrunt

• Expérience sur les chaînes CI/CD (GitLab, GitLab CI/CD)

• Connaissance des outils d’orchestration type Airflow

• Expérience des environnements distribués et fortement scalables

• Expérience en gouvernance, sécurité et conformité des données appréciée

• Maîtrise des méthodologies Agile (Scrum ou Kanban)

• Capacité à vulgariser des sujets techniques complexes et à collaborer avec des équipes pluridisciplinaires

• Excellentes capacités de communication et documentation technique

• Maîtrise du français indispensable (contexte de collaboration francophone)

• La connaissance du secteur des médias, du streaming ou des plateformes digitales à forte volumétrie de données constitue un atout important