Au sein de la Data Platform, vous intervenez sur des solutions de traitement de données à grande échelle en vous appuyant sur des technologies telles que BigQuery, BigTable, Apache Kafka et Apache Spark.
Vous veillez à garantir la robustesse, la performance et la scalabilité des solutions.
Votre rôle
Architecture et conception de solutions Data
· Définir l’architecture des solutions de traitement de données à grande échelle
· Piloter la conception technique des pipelines batch et streaming
· Encadrer le développement des solutions
Performance et fiabilité
· Concevoir et optimiser les solutions basées sur BigQuery, BigTable, Apache Kafka et Apache Spark
· Garantir la robustesse, la performance et la scalabilité des solutions
· Optimiser les modèles de données et les requêtes
Leadership technique
· Participer aux choix techniques structurants
· Définir et diffuser les bonnes pratiques de développement
· Réaliser les revues de code
· Accompagner et faire monter en compétence les équipes
Profil candidat:
Votre profil
Compétences techniques :
· Maîtrise de Scala et / ou Java avec une bonne compréhension des concepts de programmation fonctionnelle
· Expérience de développement avec Spring Boot
· Compétences en Apache Kafka (dont Kafka-stream) et Apache Spark
· Bonne maîtrise de BigQuery et SQL avancé
· Expérience significative en environnement Cloud (GCP ou AWS) notamment sur des services data tels que Cloud Storage, BigQuery, Dataproc
· Maîtrise de Docker, Docker Compose et Kubernetes
· Pratique des outils CI/CD en particulier GitLab CI/CD
· Bonne connaissance de l’environnement Linux
· Expérience dans l'écriture de tests unitaires et d'intégration
· Expérience de travail en méthodologie agile (Scrum)
Qualités personnelles :
· Excellente communication écrite et orale adaptée à différents types d’interlocuteurs
· Esprit d'analyse, capacité à prendre du recul et à challenger les sujets
· Culture d'amélioration continue
· Capacité à identifier des solutions concrètes et pertinentes face à des problématiques complexes
· Aptitude à travailler efficacement en équipe
__________
Type de contrat :
CDI
Niveau d’expérience :
7 ans minimum
Secteur :
Distribution
Localisation :
Ile de France
Langues :
français et anglais professionnels exigés
__________
Free-Work
Massy 91300
Autre(s)
CDI
60000€ par an 60000