Текст заказа
Nous recherchons pour un de nos clients un MCO Databricks (H/F) afin de garantir la stabilité et l’exploitabilité en production des nouveaux traitements.
Vous interviendrez à la croisée du Data Engineering, de la Production et du MCO, avec un rôle clé dans la montée en compétence de l’équipe.
Vos missions
Exploitation et MCO Databricks
* Suivre au quotidien les jobs et workflows Databricks en production, avec un contrôle des traitements de nuit dès 7h30.
* Analyser les échecs, identifier les causes racines et effectuer ou accompagner les relances.
* Diagnostiquer les incidents à partir des logs et métriques, et contribuer à leur correction.
* Participer à la gestion des problèmes pour réduire durablement les incidents récurrents.
Industrialisation de la supervision
* Mettre en place ou améliorer le monitoring et l’alerting.
* Définir les contrôles à appliquer sur les pipelines Data.
* Contribuer à la construction de dashboards de supervision et de KPI MCO.
Automatisation et amélioration continue
* Automatiser les actions répétitives de diagnostic et de reprise.
* Renforcer la fiabilité des pipelines et l’observabilité de la plateforme.
Documentation et transmission
* Documenter les traitements en production, rédiger les runbooks et les procédures de relance et de reprise.
* Former et accompagner l’équipe MCO pour qu’elle gagne en autonomie sur les incidents récurrents.
Profil candidat:
* 3 à 5 ans d’expérience, dont une expérience significative sur Databricks en production.
* Maîtrise de Databricks, SQL, Python / PySpark et Azure Data Factory, ainsi que de la gestion des incidents.
* Appréciés : dbt, OpCon, Snowflake, SnapLogic, MicroStrategy, Power BI.