Un client migre sa dataplateforme legacy vers un socle full GCP.
L'architecture et le plan sont validés.
On recherche un experts polyvalents,
moteurs de la migration, pas des exécutants.
Vous portez plus spécifiquement l'orchestration du projet.
Contexte :
Vous rejoignez le pôle plateforme data (5 pôles au total) en binôme avec un autre Data Engineer GCP expert.
Vous êtes tous les deux capables de tout couvrir, vous tirez l'équipe, vous posez les standards.
Missions
- Piloter la migration de l'orchestration vers Cloud Composer 2.
- Nettoyer, rationaliser, porter les DAG existants, industrialiser les standards
(CI/CD, tests, observabilité).
- Orchestrer le cut-over legacy ? cible sans double run.
- Contribuer à la migration des pipelines BigQuery et à l'IaC Terraform du socle.
- Transmettre à l'équipe interne au fil de l'eau.
Stack (maîtrise attendue sur l'ensemble)
Airflow 2.x, Cloud Composer 2, Python, BigQuery, Terraform, GCS, IAM GCP,
Git, CI/CD.
Exposure Dataplex, Mulesoft, Fivetran, dbt.
Profil candidat:
Profil
- 7+ ans en data engineering, dont 3+ sur GCP en production.
- Une migration d'orchestrateur menée de bout en bout, avec chiffres à l'appui.
- Terraform écrit, pas consommé :
vous relisez une PR et refusez ce qui casse.
- Python opérationnel, tests de DAG en CI, coûts BigQuery maîtrisés.
- Rôle moteur :
vous arbitrez, documentez, transmettez.
Free-Work
Paris 94700
Autre(s)
Freelance
137500€ par an 137500
