Data engineer manager h/f

NEXTON recrute un Data Engineer Manager H/F, en CDI, à Paris !

Ton futur environnement de travail :

En tant que Data Engineer Manager, tu seras responsable de la gestion et de l'optimisation des flux de données au sein de l'entreprise. Tu encadreras une équipe de Data Engineers et travailleras en étroite collaboration avec les équipes Data Science, Business Intelligence et Produit pour construire des pipelines de données robustes et évolutifs, en utilisant des outils modernes tels que Python, Airflow, GCP, DBT, Dataflow et BigQuery. Ton rôle combinera des responsabilités techniques de haut niveau avec des responsabilités de management, afin de garantir la performance et la scalabilité de l'infrastructure de données.

Tes missions :

Gestion de l'équipe Data Engineering
- Tu encadres et développes une équipe de Data Engineers, en assurant leur montée en compétences techniques et en les guidant sur les meilleures pratiques.
- Tu organises et priorises les tâches de ton équipe, en veillant à l'atteinte des objectifs et au respect des délais.
- Tu mets en place des formations et du mentoring pour aider les membres de l'équipe à progresser dans leur carrière.

Conception et gestion des pipelines de données
- Tu conçois, développes et gères des pipelines de données fiables et scalables en utilisant Airflow, Dataflow et Python pour le traitement des données en temps réel et en batch.
- Tu mets en place des processus d'intégration et de livraison continue (CI/CD) pour les pipelines de données.
- Tu t'assures de la qualité, de la sécurité et de la conformité des données traitées tout au long du cycle de vie des pipelines.

Optimisation de l'architecture de données sur GCP
- Tu supervises la mise en oeuvre de l'architecture de données sur Google Cloud Platform (GCP), en utilisant des outils comme BigQuery pour l'analyse des données à grande échelle.
- Tu gères les environnements de données sur GCP, en assurant la performance, la scalabilité et la sécurité des solutions.
- Tu collabores avec les équipes d'architecture pour assurer une gestion optimale des ressources cloud et des coûts associés.

Gestion de la transformation des données avec DBT
- Tu es responsable de la mise en place et de la gestion de la transformation des données à l'aide de DBT, en assurant la qualité, la transparence et la reproductibilité des modèles de données.
- Tu définis et mets en place des standards pour l'écriture des modèles de données dans DBT et encadres ton équipe pour adopter ces pratiques.

Analyse des performances et résolution des problèmes
- Tu analyses les pipelines et les flux de données pour identifier les problèmes de performance ou d'inefficacité et tu proposes des solutions d'optimisation.
- Tu surveilles la bonne santé des pipelines et des environnements cloud pour garantir des performances optimales.

Collaboration avec les équipes produits et Data Science
- Tu travailles étroitement avec les équipes Data Science et BI pour répondre aux besoins d'analyse de données et leur fournir des pipelines de données adaptés.
- Tu collabores avec les Product Owners pour identifier les besoins métiers en matière de données et mettre en place des solutions adaptées.