Contexte & Mission Au sein d'une équipe technique innovante, vous contribuez à garantir la fiabilité et la performance d'un moteur d'ingestion de données massives (Big Data). Votre rôle est clé : vous concevez, implémentez et automatisez des tests pour valider la robustesse des flux, tout en étant force de proposition pour améliorer la qualité globale du système. Votre mission principale : Assurer la qualité et la maintenabilité d'un moteur d'ingestion de données, en collaborant étroitement avec les équipes Data Engineering et Développement. Vous serez amené(e) à tester, analyser, et occasionnellement développer des correctifs ou outils d'automatisation, dans un environnement technique exigeant et évolutif. Responsabilités clés Stratégie de test : Définir et mettre en œuvre des plans de test adaptés aux enjeux Big Data (volume, vitesse, variété). Validation des flux : Tester l'ingestion, la transformation et le stockage des données (formats variés : CSV, JSON, Avro, Parquet.). Automatisation : Développer et maintenir des tests automatisés (Java, Python, frameworks dédiés). Analyse & Résolution : Identifier, documenter et suivre les anomalies, en proposant des solutions techniques si nécessaire. Collaboration : Travailler en étroite synergie avec les Data Engineers et Développeurs pour améliorer la qualité et la performance du moteur. Évolution : Participer à l'amélioration continue des processus QA et contribuer au développement d'outils internes (scripts, utilitaires, etc.). Profil recherché Compétences techniques : Expérience confirmée en assurance qualité, idéalement sur des projets Big Data ou data-intensive. Maîtrise de Java et/ou Python, et des frameworks de test (JUnit, TestNG, PyTest, etc.). Connaissance des technologies Big Data (Hadoop, Spark, Kafka, etc.) et des formats de données (CSV, JSON, Avro, Parquet). Expérience avec des outils d'automatisation (Selenium, Jenkins, GitLab CI/CD, etc.). Capacité à développer des scripts ou outils pour faciliter
Recruteur ou personne concernée par cette annonce ? Demander la suppression