Société : ALFI : Financial Markets Consultancy Services Lieu : Paris
Le DataEngineer intervient au sein de l'équipe Engineering Open Big Data du Département Guilde Data, qui regroupe l'ensemble des expertises technologiques liées à l'ingénierie de la donnée, de l'automatisation et à l'exploitation des modèles de Machine Learning.
Votre rôle et vos missions :
Vous aurez pour missions principales de développer les projets Big Data demandés par le métier, et notamment :
Passer de la donnée brute à de la donnée exploitable, exposée sous forme de tables requêtables dans le Datalake Consolider ces données au fur et à mesure de leur alimentation récurrente dans le Datalake Les exploiter pour atteindre la finalité business (exposition de Business View, réintégration des résultats dans le SI, service de scoring, ..
.
) De mettre en place et de garantir le respect dans la durée d'un processus qualité sur l'ensemble du cycle de DEV (documents, tests unitaires / intégration / fonctionnels, commentaires, versionning, etc.) Accompagner les DataEngineers sur son périmètre pour garantier la qualité des livrables Expertise souhaitée Compétences techniques :
Expertise en SPARK et PySpark Expertise sur Databricks Une expérience sur un cloud provider public comme Azure (idéalement), AWS, ou GCP Connaissances avancées d'outils de BI comme PowerBI (idéalement) ou Spotfire Compétences transverses :
Capacité à interagir avec des parties prenantes diverses :
Business analyst, Architectes, Métier Expérience en mode de Delivery Agile (Scrum, Kanban, etc..
.
.) Etre expert dans les pratiques du Software Craftsmanship (Test Driven Development, Behavior Driven Development, Clean Code, Code Reviews, etc.) Et :
Des Connaissances sur Azure DevOps, Azure Pipeline, GIT Maitrise des Traitements Big Data en mode Streaming Maitrise des Bases de données relationnelles et NoSQL Une expérience professionnelle avec des outils comme Azure Databricks, Azure Data Lake Storage ou encore Azure Data Factory Conformément à la règlementation, et à notre politique d'égalité professionnelle, tous nos postes sont ouverts aux personnes en situation de handicap.
ALFI : FinancialMarketsConsultancyServices Paris Expérience souhaitée
