Data engineer sql gcp talend bigquery python teradata dataform cloudcomposer (it) / freelance

Data Engineer



Compétences clés Obligatoires :

SQL GCP Talend BigQuery



Compétences clés Importantes :

Python Teradata DataForm CloudComposer



Missions principales :
? Analyser les besoins métiers et comprendre les impacts business des données afin de réaliser une conception pertinente et alignée avec les objectifs stratégiques.
? Concevoir et développer des pipelines de données robustes et scalables en utilisant Talend et les services de Google Cloud Platform (BigQuery, DataForm, Dataflow, Pub/Sub, CloudComposer). Vous serez au c?ur de la construction d?une infrastructure de données moderne et performante.
? Améliorer la performance et la scalabilité des solutions existantes pour répondre aux besoins stratégiques de l?entreprise.
? Collaborer étroitement avec les architectes, PO et Data Analyst pour garantir la qualité et l?exploitation optimale des données.
? Maintenir une documentation technique précise et complète sur les processus et les solutions implémentés.
? Réalise la recette technique et participe à animer la recette fonctionnelle avec les utilisateurs et le PO
? Mettre en place et gérer des systèmes de monitoring et d?alerting pour assurer une supervision proactive des pipelines et systèmes de données, garantissant leur fiabilité et leur disponibilité.
? Support au déploiement
? Assure la maintenance corrective ou évolutive
? S?assure de la cohérence des livrables avec les règles et bonnes pratiques définies au sein de l?équipe









Profil candidat:
Missions principales :
? Analyser les besoins métiers et comprendre les impacts business des données afin de réaliser une conception pertinente et alignée avec les objectifs stratégiques.
? Concevoir et développer des pipelines de données robustes et scalables en utilisant Talend et les services de Google Cloud Platform (BigQuery, DataForm, Dataflow, Pub/Sub, CloudComposer). Vous serez au c?ur de la construction d?une infrastructure de données moderne et performante.
? Améliorer la performance et la scalabilité des solutions existantes pour répondre aux besoins stratégiques de l?entreprise.
? Collaborer étroitement avec les architectes, PO et Data Analyst pour garantir la qualité et l?exploitation optimale des données.
? Maintenir une documentation technique précise et complète sur les processus et les solutions implémentés.
? Réalise la recette technique et participe à animer la recette fonctionnelle avec les utilisateurs et le PO
? Mettre en place et gérer des systèmes de monitoring et d?alerting pour assurer une supervision proactive des pipelines et systèmes de données, garantissant leur fiabilité et leur disponibilité.
? Support au déploiement
? Assure la maintenance corrective ou évolutive
? S?assure de la cohérence des livrables avec les règles et bonnes pratiques définies au sein de l?équipe