DataEngineerParis / Lille Up to 65kâ?¬ CDI - Pas Freelance Cette entreprise internationale dans le monde de l'assurance developpe son equipe data et recherche un nouveau DataEngineer.
Responsabilités :
Collaborer avec les architectes de données pour garantir que le développement est aligné sur l'architecture cible.
Développer des processus d'ingestion de données, facilitant le streaming de données en temps réel et par lots dans le lac de données.
Mettre en Å?uvre des mécanismes de génération de couches de données sélectionnées comprenant divers ensembles de données pour la consommation commerciale.
Diriger la mise en Å?uvre de MLOps pour rationaliser le déploiement d'algorithmes ML à l'échelle de l'entreprise.
Établir des cadres pour l'entreposage de données afin d'accélérer la génération de modèles en étoile.
Travailler en étroite collaboration au sein d'une équipe agile aux côtés des trains de publication agile, des propriétaires de produits et des maîtres scrum pour atteindre les objectifs de l'équipe.
Participer activement aux cérémonies de la communauté de pratique de l'ingénierie des données, en particulier aux chapitres, pour partager des connaissances techniques et favoriser la collaboration.
Candidat idéal :
Must have :
3 à 5 ans d'expérience en gestion de données et en technologies Big Data, avec une maîtrise de SQL, PySpark et Python.
Une expérience pratique approfondie (3 ans) avec les services de Cloud Computing AWS :
Glue, Athena, Redshift et DynamoDB.
Une expérience avérée (3 ans) dans la mise en Å?uvre des entrepôts de données.
Maîtrise de l'anglais.
Un Plus :
Connaissance supplémentaire des services de Cloud Computing AWS :
CDK, SageMaker, fonctions Lambda, Lake Formation, Kinesis.
Familiarité avec les outils BI (de préférence QuickSight ou PowerBI).
Maîtrise de Git, Jupyter Notebook, pip, Java, Apache Airflow.
