Data Engineer Hadoop / PySpark - Datalake @ > 3 ans d'XP @ Banque @ Paris - Freelance

Localisation : IDF
Démarrage souhaité : 28/09/2026
Fin prévisionnelle : 26/02/2027
Séniorité : > 3 ans d’expérience
Secteur : Banque / Services financiers

Contexte & enjeux

Dans le cadre d’une mission au sein de la DSI d’un grand acteur du secteur bancaire et des services financiers, nous recherchons un Data Engineer Hadoop / PySpark pour intervenir sur le Datalake du CIO Office .

La DSI concernée fournit notamment les applications nécessaires aux activités Technologies & Opérations ainsi qu’aux activités de Banque de Proximité et Assurance .

Le Data Engineer intégrera un environnement Data nécessitant une collaboration étroite avec les équipes de production applicative et DevOps , notamment pour mettre en œuvre les évolutions techniques de la plateforme.

Les principaux enjeux portent sur l’intégration de nouvelles données, leur préparation et leur transformation, ainsi que sur le développement et l’évolution des pipelines de traitement au sein d’un environnement Hadoop.

Missions détaillées

Le consultant aura notamment pour responsabilités de :

• Mettre en œuvre de nouvelles ingestions de données au sein du Datalake.

• Réaliser les traitements de Data Preparation et de transformation des données .

• Développer de nouveaux pipelines de données en PySpark .

• Maintenir et faire évoluer les pipelines et traitements Data existants.

• Réaliser du Shell Scripting sous Unix/Linux .

• Travailler en collaboration avec l’équipe DevOps sur les demandes d’évolution de la plateforme.

• Participer au maintien en conditions opérationnelles des traitements Data.

• Contribuer aux évolutions techniques de la plateforme en lien avec les équipes de production applicative.

• Analyser et résoudre les problématiques techniques rencontrées sur les traitements et flux de données.

• Rédiger les spécifications techniques .

• Documenter les développements et solutions techniques mis en œuvre.

• Participer aux travaux de l’équipe dans un environnement Agile / Scrum .

• Collaborer régulièrement avec une partie importante de l’équipe IT basée à Porto , nécessitant une utilisation professionnelle de l’anglais à l’écrit comme à l’oral.

Stack technique

Compétences indispensables :

• Hadoop

• Python

• PySpark

• Hive

• SQL

• Shell Scripting Unix/Linux

Environnement & outils :

• Git

• Jenkins

• Jira

• Agile / Scrum

Compétences appréciées / différenciantes :

• Indexima

• Alteryx

• Altair

• GCP

• BigQuery

• Bibliothèques Python orientées API