Les missions du poste
Le besoin
Votre mission
Concevoir, construire et maintenir des pipelines et infrastructures robustes et performants
Garantir une architecture et une modélisation des flux optimisées et évolutives
Faire évoluer la stack legacy vers les nouveaux standards de la Data Platform
Assurer la qualité, la fiabilité et la gouvernance des données
Apporter votre expertise et aider l'équipe dans ses choix techniques
Promouvoir la qualité du code et les bonnes pratiques (revue de code, CI/CD)
Respecter les engagements de sprint et contribuer à l'amélioration continue
Le profil recherché
Profil recherché
dbt (avancé) : industrialisation, documentation, tests des modèles
SQL (avancé) : modélisation et interrogation
Databricks (confirmé) : gestion des clusters, optimisation des performances, gouvernance
PySpark (avancé)
Apache Airflow (avancé) et Astronomer (confirmé) : création, monitoring et optimisation de DAGs complexes
AWS (avancé)
Python (confirmé)
CI/CD et revue de code au quotidien (GitHub)
Travail en environnement agile (Scrum / Kanban)
Compétences requises
- Python
- Cluster
- Optimisation des performances
- Gouvernance des données
- Git
- AWS
- SQL