Data engineer : gcp, data governance

Descriptif de la mission :

CONTEXTE DU POSTE :

Dans le cadre de notre politique d'amélioration continue de la gouvernance et de la qualité des données, nous recherchons un Data Engineer freelance pour renforcer notre équipe data. La mission s'inscrit dans un projet d'industrialisation des flux data avec un focus particulier sur les données produits de la Supply Chain, dans un environnement Google Cloud Platform (GCP).

MISSIONS PRINCIPALES 1 :

Développement & Optimisation des Pipelines Data :

• Exposition des données produits Supply dans BigQuery
• Utilisation et amélioration du processus Data Provider (DBT + Terraform)
• Refonte potentielle des pipelines existantes (Airflow/Composer)

2. Gouvernance & Qualité des Données :

• Vérification de la cohérence sémantique via Collibra
• Implémentation de métriques Data Quality
• Documentation technique des flux

3. Atouts Appréciés :

• Contribution à des outils de Data Visualization
• Collaboration sur des projets intégrant de l'IA/ML
• Sensibilité aux enjeux Cybersécurité/RGPD

Atouts Différenciants :

• Connaissance de Collibra
• Expérience avec des outils de Data Viz
• Sensibilité aux projets IA/ML

STACK TECHNIQUE

Catégorie Technologies

Cloud - GCP (BigQuery, Dataflow, Cloud Composer)
Orchestration - Airflow, Cloud Composer
Transformation - DBT, SQL
Gouvernance - Collibra
Bonus - Looker/Tableau, Vertex AI, connaissances RGPD


PROFIL RECHERCHÉ :

Compétences Techniques Requises :

• Expérience confirmée sur GCP (BigQuery obligatoire)
• Maîtrise des outils DBT et Terraform
• Bonne connaissance d'Airflow/Composer
• Expérience en Data Quality et gouvernance

Soft Skills :

• Autonomie et force de proposition
• Bonne communication avec les métiers
• Capacité à documenter son travail

Environnement Technique

Airflow

GCP

Rgpd

SQL

cloud composer

dbt

collibra

looker / tableau

vertex ai