Rejoignez Valeuriad, ESN Agile, engagée, 100% Nantaise et organisée sur un mode de management participatif. &##Pour intervenir en tant que Data Engineer.
Étude, conception et réalisation de traitements Big Data ;
Échange avec les architectes, les PO et PPO, les développeurs et la gouvernance de données ;
Exploration des données et des usages des utilisateurs avec Impala ;
Import de données (SFTP, Kafka, RabbitMQ) ;
Alimentation du cluster Hadoop via des composants développé en Java avec le Framework Spark sur IntelliJ ;
Collecte des données depuis Teradata via l’outil Sqoop dans une base de données Hive ;
Transformation des données avec Spark (HDFS, Hive, Kafka, Hbase, Phoenix) ;
Utilisation de Apache Kudu afin d'optimiser les requêtes utilisateurs sur les données chaudes ;
Exposition de données sur Dataiku pour la création de modèle de DataScience ;
Réalisation en Java – Flink pour gérer les traitements complexe et volumineux ;
Gestion de configuration sous Git avec GitLab ;
Transformation des données et calcul d'indicateurs sous Hive ;
Utilisation de Kibana pour visualiser et mesurer la volumétrie de traitements quotidien et en streaming.
Environnement : Big Data Apache ( Hadoop, Spark, Ambari, Hive )
Technologies utilisées : Hadoop, Apache Ambari, RabbitMQ, Java, Scala, YarnApplication, Teradata, Squoop, Kudu, Hue, Hive, Impala, Dataiku, Flink, Kafka, Spark, Kibana, Oozie, Git, GitLabCI, Jenkins, AWS.
Vous ferez partie de notre Communauté Data Valeuriad. &##Data ingé / Data scientists / Data Analysts / MlOPS...
La possibilité de vous investir au-delà de votre future mission : réaliser des suivis techniques et/ou des entretiens techniques et/ou aider lors des réponses à appel d'offres.
3 offres de service : DevOps / Data-IA / Conseil Agile
~ Un environnement de travail confortable : Notre “Nid” Un espace éco rénové, doté de bureaux ergonomiques, d’une salle de détente et un accès en libre service aux boissons et petites gourmandises quotidiennes.
Une organisation d’entreprise collaborative où vous aurez la possibilité de participer à des sujets internes : demi-journée d’innovation ; intégrer un de nos comités (RSE, technique ou mécénat).
Un suivi de carrière personnalisé et sur mesure grâce à un triptyque de référent RH/Commerce/Technique et des points d’échange réguliers. Nous aurons plaisir à en discuter + concrètement, y compris avec un technique... &##128522;
En cliquant sur "JE DÉPOSE MON CV", vous acceptez nos CGU et déclarez avoir pris connaissance de la politique de protection des données du site jobijoba.com.