Data Engineer QA/Data Quality (F/H) - Freelance

Description du poste

Envie d’un nouveau challenge… nous vous attendons !
=======================================================

Nous poursuivons notre développement et recherchons actuellement un.e Data Engineer orienté QA / Data Quality pour intervenir chez l’un de nos clients dans le domaine bancaire. \-

• Contexte de la mission

Dans le cadre du renforcement de sa Data Platform Cloud, notre client souhaite accélérer la mise en place de standards de qualité, de fiabilité et d’observabilité autour de ses traitements Data.

Vous intégrerez une feature team dédiée à la conception, au développement et à la fiabilisation des pipelines de données au sein d’un environnement moderne basé sur Databricks et AWS.

L’objectif : garantir des données fiables, cohérentes et exploitables pour les usages métiers, analytics et IA, tout en intégrant les bonnes pratiques QA directement dans les pipelines Data.

Vous évoluerez dans un environnement Agile, international et fortement orienté qualité et amélioration continue.

Vos missions :
------------------

• Data Quality \& QA

Définir et mettre en œuvre des règles de qualité de données :

• complétude


• cohérence


• unicité


• exactitude

Mettre en place des frameworks de validation et de contrôle qualité des données

Concevoir et intégrer des tests automatisés dans les pipelines ETL / ELT :

• tests unitaires


• tests d’intégration


• tests de non\-régression

Garantir la conformité des transformations de données avec les règles métiers et les besoins fonctionnels

• Engineering \& Data Pipeline

Concevoir et faire évoluer des pipelines Data intégrant des mécanismes de contrôle qualité

Participer au traitement et à la validation des données à grande échelle avec Spark et Databricks

Analyser et corriger les anomalies de qualité de données en production

Contribuer à la fiabilisation et à l’industrialisation des traitements Data

• Observabilité \& Cloud

Mettre en place des solutions d’observabilité et de monitoring :

• alerting


• détection d’anomalies


• détection de dérive des données

Participer à la supervision des pipelines et à la gestion des incidents

Contribuer à l’intégration des bonnes pratiques QA dans les pipelines CI/CD

• Collaboration transverse

Travailler en étroite collaboration avec :

• les Data Engineers


• les Data Analysts


• les équipes métiers


• les Product Teams

Participer à la définition des data contracts et des critères d’acceptance

Accompagner les équipes dans l’adoption des bonnes pratiques Data Quality

Profil recherché

• Profil recherché

De formation supérieure en informatique ou Data, vous justifiez d’au moins 4 ans d’expérience en Data Engineering, Data Quality ou QA Data dans des environnements Cloud et Big Data.

Vous êtes reconnu.e pour votre rigueur, votre sens de l’analyse et votre capacité à fiabiliser des traitements de données complexes.

Vous appréciez les environnements techniques modernes, collaboratifs et orientés amélioration continue.

• Compétences techniques attendues :

Data Engineering \& QA :

• Python avancé


• SQL avancé


• ETL / ELT


• Data Quality Frameworks


• Tests automatisés Data


• Spark


• Databricks

Cloud \& industrialisation :

• AWS


• CI/CD


• Monitoring \& observabilité


• Automatisation des tests

Méthodologies \& environnement :

• Agile / Scrum / SAFE


• Quality by Design


• Data Observability


• Une expérience autour des sujets Data Contracts, Data Observability ou Data Governance serait un plus.


• Soft skills

Esprit analytique et sens du détail

Capacité à investiguer et résoudre des problématiques complexes

Autonomie et sens des responsabilités

Force de proposition

Bon relationnel et esprit collaboratif

Curiosité technique et veille autour des sujets Data Quality

Bonne communication en anglais

Cette annonce provient de indeed. Voir l'annonce originale ↗