Contexte
Dans le cadre du développement d’une Squad Usages Data Avancés & IA, nous recherchons un(e) Data Engineer confirmé(e) pour contribuer à la conception, l’industrialisation et l’amélioration continue de solutions data à forte valeur ajoutée.
Vous évoluerez dans un environnement orienté DataOps, MLOps et industrialisation de solutions analytiques, au sein d’une équipe pluridisciplinaire (Data Scientists, DevOps, Product Owner…).
La squad intervient sur :
La conception et la maintenance d’applications data
L’amélioration continue des produits existants
La construction de nouveaux usages Data & IA
Vos missions
Conception & Architecture
Participer à la définition des solutions applicatives data
Contribuer aux choix d’architecture (batch, streaming, microservices data)
Concevoir des pipelines robustes, scalables et performants
Développement & Intégration
Construire et maintenir des pipelines ETL / ELT (données structurées et non structurées)
Développer des traitements en Python (PySpark, FastAPI) et SQL
Intégrer des flux temps réel via Kafka / Spark
Réaliser les phases d’intégration et de recette technique
Industrialisation – DataOps / MLOps
Mettre en œuvre des chaînes CI/CD et de déploiement (Docker, Kubernetes, GitHub/GitLab Actions)
Industrialiser des modèles statistiques ou de Machine Learning
Versionner données, modèles et code
Monitorer la performance, la qualité et les coûts des traitements
Assurer l’observabilité des solutions (ELK, Prometheus/Grafana, MLflow)
Qualité & Amélioration Continue
Mettre en place des tests automatisés (Pytest)
Maintenir un haut niveau de qualité de code (SonarQube)
Améliorer l’efficacité des processus
Maintenir une documentation claire et à jour
Collaboration
Travailler en étroite collaboration avec les membres de la squad
Préparer des datasets pour l’exploration et l’analyse
Accompagner les utilisateurs dans la prise en main des solutions
Docker
Kubernetes
GitHub Actions ou GitLab CI
Compétences techniques requises
Langages & Frameworks:
Python (PySpark, FastAPI), SQL
Big Data & Streaming:
Apache Spark, Apache Kafka
Bases de données:
PostgreSQL, Teradata, MySQL
MLOps / CI-CD / Conteneurisation:
Docker, Kubernetes, GitHub Actions ou GitLab CI
Qualité & Observabilité:
Pytest, SonarQube, Stack ELK, Prometheus / Grafana, MLflow
Profil candidat:
Profil recherché
Data Engineer expérimenté(e) disposant de minimum 5 ans d’expérience, capable de concevoir, développer et industrialiser des solutions data de bout en bout.
Vous êtes autonome, rigoureux(se), orienté(e) qualité et performance, et vous appréciez le travail en équipe dans des environnements exigeants et structurés.
Free-Work
Paris 94700
Autre(s)
CDI
45000€ par an 45000
