Retour

Data engineer

OPENVALUE

92 - NEUILLY SUR SEINECDIAnnuel de 39000.00 Euros à 46500.00 Euros sur 12 moisitfrance_travailexigee

Description

En tant que Data Engineer, vous jouerez un rôle clé dans la conception, la mise en œuvre et l'industrialisation des plateformes et pipelines data au service des projets d'IA Générative. Vous interviendrez au cœur des écosystèmes data & cloud de nos clients, en collaboration avec des experts data scientists, IA engineers et métiers, pour transformer la donnée en leviers d'innovation et de performance. Vos principales responsabilités : Concevoir, développer et maintenir des pipelines de données robustes, scalables et performants. Intégrer, transformer et fiabiliser les données issues de multiples sources (API, bases de données, fichiers, etc.). Garantir la qualité, la traçabilité et la gouvernance des données tout au long de leur cycle de vie. Participer à la mise en place d'architectures data cloud modernes (Data Lake, Delta Lake, Data Warehouse, Data Mesh.). Collaborer avec les équipes IA pour préparer et servir les données nécessaires à l'entraînement ou au fonctionnement des modèles d'IA Générative. Implémenter des bonnes pratiques de développement (tests, documentation, CI/CD, code review). Contribuer à la veille technologique et à la montée en compétence des équipes sur les sujets data & GenAI. Profil recherché : Vous justifiez d'au moins 3 ans d'expérience en tant que Data Engineer. Vous maîtrisez un ou plusieurs langages de programmation (Java et/ou Scala). Vous appliquez les bonnes pratiques de développement : clarté du code, documentation, qualité logicielle. Vous connaissez les design patterns (ex. : Singleton) et les outils de développement collaboratif (Git). Vous comprenez les workflows data et savez construire et automatiser des pipelines de traitement. Vous avez une bonne maîtrise du framework Spark. Une première expérience sur un Cloud Provider (Azure, GCP, AWS) est un plus. Une première expérience sur un projet d'IA Générative est fortement appréciée. Vous connaissez ou avez expérimenté des outils d'IA Générative (Mistral, OpenAI) et des framew

Offres similaires