Dans le cadre d’un projet Data sous environnement Microsoft Azure, nous recherchons un Data Engineer disposant d’une expérience significative sur Azure Databricks (Python).
Le consultant interviendra sur la conception, le développement et l’optimisation de traitements data au sein d’une plateforme moderne.
Il participera à la mise en place de pipelines de transformation et à l’intégration des flux dans l’écosystème Azure.
Les principales responsabilités incluent:
Développement de notebooks Azure Databricks en Python / PySpark
Conception et optimisation de pipelines de transformation
Intégration avec Azure Data Factory
Contribution aux sujets de gouvernance via Unity Catalog
Participation aux déploiements et bonnes pratiques d’industrialisation (Terraform)
Profil candidat:
Minimum 3 à 4 ans d’expérience sur Azure Databricks
Solide maîtrise de Python / PySpark
Expérience confirmée en Data Engineering sur environnement Azure
Bonne compréhension des architectures data modernes
Expérience avec Azure Data Factory appréciée
Connaissance de Unity Catalog et Terraform valorisée
Autonomie, rigueur et capacité à évoluer dans un environnement projet structuré
Environnement technique
Azure Databricks
Python / PySpark
Azure Data Factory
Unity Catalog
PostgreSQL
Terraform
Free-Work
Paris 94700
Autre(s)
Freelance
