Senior Data Engineer Databricks Pyspark H/F - collectivite
- Indépendant
- collectivite
Les missions du poste
Information importante
Type de contrat: Freelance
Taux journalier : 560
Localisation : Lille, France
Date de démarrage :
Urgent
Mode de travail : Hybride
Publié le : 19 juin 2026
Le besoin
Contexte
Une entreprise internationale du secteur retail sport recrute un Senior Data Engineer pour renforcer son équipe Managed Tools, au sein de sa Data Factory. Cette équipe est responsable de la mise à disposition et de la robustesse de la stack data à l'échelle du groupe. La squad Compute a pour enjeu d'accompagner les utilisateurs aux bonnes pratiques sur une modern data stack et son orchestration, afin de soutenir le développement des use cases métiers sur la plateforme.
Missions
- Garantir la robustesse de la plateforme de compute et d'orchestration via un monitoring actif et des actions proactives
- Accompagner la migration d'AWS Glue Catalog vers Unity (Databricks)
- Accompagner la migration des utilisateurs de MWAA vers Astronomer
- Assurer le support et l'accompagnement des équipes sur Spark et Databricks
- Travailler sur les optimisations des traitements PySpark
- Définir et promouvoir les bonnes pratiques de data engineering sur les technologies de l'équipe
- Contribuer aux travaux sur l'accessibilité et la gouvernance de la donnée
- Tester et évaluer de nouveaux outils et fonctionnalités à intégrer dans la stack
Conditions de travail
- Localisation : Lille (hybride)
- Durée : Mission longue
Profil recherché
- Senior en expérience
- Compétences techniques avancées en PySpark, Terraform et CI/CD
- Compétences confirmées en EMR et Databricks
- Expérience avancée sur une stack incluant Databricks
- Maîtrise de l'anglais courant
Compétences requises
- Anglais
- Gouvernance des données
- Terraform
- Unity
- AWS