Tech lead data hub (h/f) (it) / freelance

Envie d?un nouveau challenge ? CELAD vous attend ! ?

Nous poursuivons notre développement et recherchons actuellement un Tech Lead Data Hub pour intervenir chez un de nos clients. ??

Voici un aperçu détaillé de vos missions ? :

Piloter la migration d?un DataHub on-prem (actuellement sous Hadoop) vers le service DataHub du groupe.


Assurer la réécriture des traitements Hadoop vers Spark en optimisant les performances.


Encadrer et accompagner les équipes techniques dans la montée en compétences sur les nouvelles technologies.


Mettre en place et orchestrer les workflows de données avec Airflow.


Optimiser et requêter les données via SQL, Starburst, Presto ou Trino.


Faciliter le retro-engineering des pipelines Hadoop/Hive si nécessaire.


Garantir la qualité, la robustesse et la scalabilité des traitements de données.





Profil candidat:
De formation BAC+3/5 Généraliste, vous justifiez idéalement d'une expérience de 5 ans minimum dans un rôle similaire.

Compétences attendues ? :

Expertise essentielle : Spark (Java/Scala)


Compétences complémentaires :

Airflow


SQL


Starburst / Presto / Trino


Hadoop/Hive (optionnel, pour le rétro-engineering)