Architect expert hadoop h/f

Qui Sommes Nous ?

SAFARI est un groupe composé de 4 structures :
- SAFARI PARTICIPATIONS Holding
- Safari Conseil Conseil en télécommunication
- Safari Technologies IT consulting
- SAFARI Digital & Sécurité Conseil & Expertise en Digital & Sécurité

SAFARI TECHNOLOGIES est une ESN (Entreprise de Services du numérique) fondée en 2012.
Notre métier est de concevoir, bâtir et commercialiser des prestations de qualité dans les domaines des technologies de l'information et de la communication. Dans ce but, nous avons créé et développé une entreprise de service du numérique. Description de la mission

L'équipe DBA & socles souhaite se renforcer et recherche une prestation d'expertise sur l'environnement Hadoop / Big data de technologie Cloudera avec des compétences en scripting autour des langages propres au domaine BigData, tels que Python, Spark, Hive, impala.

Des besoins nouveaux et des usages différents du système décisionnel à travers le « Big Data » sont en train de s'amplifier en termes d'exigences. De ce fait plusieurs évolutions techniques et fonctionnelles sont envisagées ce qui nécessite le renforcement de l'équipe technique « Big Data.

Objectifs de la prestation
Description du besoin :
- Pilotage et mise en oeuvre opérationnelle des travaux de fiabilisation des socles Hadoop pour répondre aux exigences de performance attendues par les cas d'usages fonctionnels.
- Evolution des architectures techniques :
- Mise en place des principes directeurs sur l'utilisation du cluster Cloudera
- Vérification de la bonne application des normes et des standards
- Force de proposition, étude, analyse et mise en oeuvre de solutions pour améliorer : l'outillage utilisateurs, optimiser les performances et la résilience du cluster
- Etude d'impact et réalisation opérationnelle des montées de version Cloudera et outils Hadoop
- Prise en compte de l'écosysteme DSI : ordonnanceur IWS, sauvegarde HDPS, supervision Prometheus / Grafana
- Expertise Hadoop de niveau 3 :
- Configuration du cluster Cloudera en fonction des besoins identifiés
- Optimisation des traitements
- Support :
- Accompagnement des équipes de développement
- Assistance auprès des équipes : Optimisation des traitements, Prise en main de l'outillage mis à disposition, Chargement des données
- Transmission du savoir-faire via la rédaction de documentations et transfert de connaissances

Environnement technique
Nécessaire
- Distribution Hadoop Cloudera CDP (version 7.1.*,) : HDFS, YARN, Cloudera Manager, Hive, Hue, Impala, Spark, Zeppelin, Ranger, Knox, Zookeeper (Cloudera CDP privilégié)
- Langages/scripting : Shell, Python, Spark
- Moteurs de requêtage : SQL, Hive, Impala
- OS : Linux

Complémentaire
- Outils décisionnels : ETL Datastage, PowerBI, SAS,
- Base de données : Teradata, PostgreS