Data engineer java / spark (toulouse) (h/f)

Data Engineer Java / Spark (Toulouse) (H/F)

Vous intégrerez une équipe transverse et multidisciplinaire composée de développeurs back-end, de data engineers et de data scientists.

Votre mission

Vous aurez pour mission de :

1. Développer des jobs Spark pour la manipulation de gros volumes de données, couvrant les pipelines d'ingestion, de nettoyage, de préparation, d'enrichissement et de croisement des données.
2. Mettre à jour les collections de données dans le datalake et rendre ces données disponibles pour les modèles de Machine Learning.
3. Enrichir le "serving layer" et exposer les données produites via des web services Rest, permettant leur intégration dans des applications métier.
4. Mener les développements Big Data jusqu'à la mise en production.
5. Assurer la maintenance corrective des solutions Big Data en place.
6. Accompagner les équipes développant des modèles ML dans leur industrialisation et leur montée en compétences.
7. Collaborer avec les différents interlocuteurs métiers et techniques

Cette mission offre 2 jours de télétravail à Balma .

Profil

8. De formation minimum BAC+5 en informatique ou équivalent.
9. Vous avez une expérience minimum de 2 ans en java et data
10. Vous aimez travailler en équipe, partager vos connaissances et relever des défis techniques.
11. Vous êtes curieux(se) et proactif(ve), toujours à la recherche de nouvelles solutions.

À compétences égales, tous nos postes sont ouverts aux personnes en situation de handicap.

Environnement technique

Vous serez amené(e) à travailler sur un environnement comprenant les technologies suivantes :

12. Langages : Java, Scala
13. Frameworks & Outils : Spark, Kafka
14. Conteneurisation et Orchestration : Docker, Kubernetes
15. Webservices : REST API
16. Tests : JUnit, Mockito