Data Engineer - Plateforme Data Engineering H/F
Contexte du projet Les grands environnements industriels font face à des enjeux majeurs liés à la donnée :Multiplication des sources d'information (applications métiers, systèmes PLM, bases de données, fichiers, APIs.)Hétérogénéité des formats et des modèlesBesoin croissant de données fiables, qualifiées et à jourNécessité d'échanges quasi-temps réel entre les systèmes Dans ce contexte, nos équipes participent à la mise en place de plateformes de Data Engineering modernes, visant à industrialiser et gouverner les flux de données. Dans ce cadre, nous recherchons un(e) Data Engineer pour participer activement à la conception et au développement de ces nouveaux usages data. Vos missions Intégré(e) à une squad transverse ou métier, vous contribuerez à la mise en œuvre et à l'évolution d'une plateforme data :Concevoir et développer des pipelines de données robustes et scalablesMettre en place les flux d'ingestion depuis différentes sources : bases de données, fichiers, APIs, événements, etc.Structurer et transformer les données selon une architecture médaillon :Bronze : collecte et stockage des données brutesSilver : qualification, nettoyage, modélisationGold : consolidation et exposition des data productsGarantir la qualité, la cohérence et la fraîcheur des donnéesIndustrialiser les traitements batch et streamingCollaborer étroitement avec les équipes métiers, architectes et data analystsParticiper aux choix d'architecture et aux bonnes pratiques (performance, sécurité, gouvernance) Environnement technique Vous évoluerez dans un écosystème moderne orienté data :Base de données : PostgreSQLStreaming / Event processing : Apache Flink, KafkaOrchestration : AirflowTransformation / Modélisation : dbtIntégration / CDC : Debezium (selon cas d'usage)Écosystème applicatif & PLM : 3DX / Windchill / SAP / outils bureau d'études
Cette annonce provient de France Travail. Voir l'annonce originale ↗