Data engineer expérimenté en contexte big-data h/f

Data Engineer expérimenté en contexte Big-Data H/F, Asnières-sur-Seine

Asnières-sur-Seine, France

SMILE est le leader du "sourire" au travail, mais aussi de l'intégration de solutions Open-Source. Enthousiastes, agiles et performants, notre vocation est de libérer le potentiel d'innovation des entreprises, à travers l'Open-Source !

Nous sommes certifiés “Happy at Work” !

En 2024, SMILE intensifie son positionnement de spécialiste en Data (engineering, analyst). En Ile de France, nous cherchons donc des consultants, expérimentés et autonomes, pour intervenir sur les problématiques big-data de nos clients grands comptes.

Au quotidien, vous serez chargé de :

* Concevoir, développer et déployer des pipelines de données efficaces pour l'extraction, la transformation et le chargement des données.
* Manipuler et nettoyer les données afin de les rendre exploitables avec des outils tels que Python.
* Mettre en œuvre des workflows d'orchestration de tâches pour automatiser les processus de traitement des données.
* Développer des applications Spark Scala pour le traitement distribué des données à grande échelle.
* Intégrer et gérer des entrepôts de données cloud pour le stockage et l'analyse des données.
* Optimiser les performances des pipelines de données pour garantir une ingestion et un traitement rapides des données.
* Encadrer et accompagner les juniors dans leur montée en compétences, selon les contextes et vos compétences sur un rôle de tech lead.

Vos années d'expériences vous ont permis :

* Une maîtrise de l’environnement Hadoop / Hive / Spark (que ce soit en local ou dans le cloud).
* La maîtrise des bases de données et gestion de bases de données (SQL/NoSQL).
* Des compétences sur les langages de programmation Scala, Java, Python.
* La maîtrise d'outils de gestion de flux (Kafka, Flink).
* De travailler en contexte Agile.
* La connaissance des solutions de manipulation des données ETL/LET.
#J-18808-Ljbffr