Tech Lead / Senior Solution Architect Databricks - Freelance H/F

Description du poste

Taux journalier (TJM): 600\-650
Dans le cadre de la modernisation et de l’industrialisation d’une plateforme Data Azure à forte volumétrie, nous recherchons un(e) Tech Lead / Senior Solution Architect Databricks pour accompagner la transformation des usages Data autour des enjeux suivants :

• Migration et industrialisation des workloads vers Databricks


• Gouvernance et qualité des données


• Optimisation des performances et des coûts cloud (FinOps)


• Accompagnement des équipes Data sur les bonnes pratiques d’architecture, de delivery et d’industrialisation

• Stack Azure / Databricks


• Architecture Data moderne orientée Lakehouse

Data Engineering \& Architecture

• Concevoir, développer et maintenir des pipelines de données à forte volumétrie


• Participer à la structuration d’une plateforme Data moderne sous Azure Databricks


• Développer des traitements batch et streaming dans une architecture Lakehouse


• Contribuer à la définition et à l’évolution de l’architecture cible

Industrialisation \& DevOps

• Industrialiser les pipelines dans une logique DevOps avancée


• Mettre en place les bonnes pratiques CI/CD, tests et automatisation des déploiements


• Fiabiliser les environnements et accompagner les mises en production

Gouvernance, Qualité \& Performance

• Garantir le respect des standards techniques et des patterns d’architecture


• Participer aux sujets de gouvernance et de qualité des données


• Optimiser les performances des traitements Spark et la consommation des ressources cloud


• Contribuer aux démarches FinOps et Green IT

Support \& Leadership Technique

• Participer au maintien en conditions opérationnelles de la plateforme (support N3\)


• Analyser et résoudre les incidents complexes de production


• Accompagner et mentorer les équipes sur les bonnes pratiques techniques


• Animer des sujets transverses et jouer un rôle de référent technique selon la séniorité

Profil recherché

Profil recherché
====================

• Minimum 5 ans d’expérience en Data Engineering


• Expérience significative sur des projets de migration et transformation Databricks


• Expérience en encadrement technique, mentoring ou lead d’équipes/projets Data


• Capacité à évoluer dans des environnements complexes et industrialisés


• Capacité à intervenir en lead technique (accompagnement des équipes, mentoring, bonnes pratiques)

Expertise technique :

• Forte expertise Databricks


• Très bonne maîtrise de SQL / Spark / Scala / Python


• Maîtrise des architectures Data modernes : lakehouse, batch \& streaming, big data / fast data


• Expérience Azure Cloud


• Bonne maîtrise des enjeux de gouvernance, qualité des données et optimisation des performances (est un \+ : maîtrise de Unity Catalog)


• Bonne maîtrise des outils CI/CD et d’industrialisation : GitLab CI, Jenkins, Terraform, Docker, Kubernetes

Certifications :

• Certification Databricks Certified Data Engineer Associate à jour


• Certification Azure Associate minimum

Cette annonce provient de indeed. Voir l'annonce originale ↗