Data Engineer ETL/Streaming (F/H)
A propos de la mission
Dans le cadre d’un Proof of Concept stratégique à lancer cet été, vous interviendrez au sein d’une équipe data sur la mise en place et la validation d’une plateforme de traitement de données orientée ETL/ELT et streaming. Ce PoC a vocation à évoluer vers un projet à long terme (full time) dès l’année prochaine.
Vous participerez à la conception, au développement et à l’industrialisation de pipelines de données, avec un fort focus sur l’ingestion temps réel et la réplication de données. L’environnement technique s’appuie notamment sur les solutions IBM (Watsonx Data Integration, DataStage, Data Replication), des technologies de streaming comme Kafka, ainsi que des plateformes data modernes telles que Cloudera (Hive, Kafka).
Le poste s’inscrit dans un contexte international et collaboratif, avec des interactions régulières lors de workshops, phases de testing et livraisons. Une organisation hybride est prévue avec une présence sur site lors des étapes clés du projet.
Ce que nous attendons de vous
Expérience significative en data engineering avec focus sur ETL / ELT
Maîtrise des outils IBM DataStage et/ou IBM Watsonx Data Integration
Connaissances en data replication / Change Data Capture (CDC)
Expérience sur Kafka et les architectures de streaming data
Bonne compréhension des bases de données DB2, Oracle, SQL Server
Expérience avec les environnements Cloudera Data Platform, notamment Hive et Kafka
Connaissance des formats de données modernes, idéalement Iceberg
Capacité à concevoir et optimiser des pipelines de données batch et temps réel
Bonne compréhension des problématiques de performance, qualité et gouvernance des données
Capacité à travailler en environnement Agile et collaboratif
Autonomie, esprit d’analyse et capacité à intervenir sur un PoC évolutif
Diese Anzeige stammt von indeed. Originalanzeige ansehen ↗