Description du poste
Contexte :
Nous recherchons pour l’un de nos clients grands comptes un Data Engineer GCP (H/F) qui travaillera en relation avec une équipe à l’internationale.
Responsabilités :
Conception et développement des pipelines data
- Concevoir et développer des pipelines de traitement de données robustes et scalables
- Mettre en place des flux d’ingestion, transformation et stockage des données
- Développer et optimiser les modèles de transformation avec dbt
- Participer à l’industrialisation des processus de traitement des données
Architecture et plateforme data
- Concevoir et maintenir des architectures data modernes sur le Cloud
- Mettre en place et optimiser les entrepôts de données Snowflake
- Participer à la modélisation des données (data warehouse / data lake / data lakehouse)
- Garantir la performance, la qualité et la disponibilité des données
Intégration et orchestration
- Développer et maintenir les pipelines d’intégration de données
- Mettre en place des outils d’orchestration et de planification des workflows
- Participer à l’intégration de différentes sources de données internes et externes
Qualité, gouvernance et optimisation
- Mettre en place des processus de qualité et de validation des données
- Optimiser les performances des requêtes et pipelines data
- Contribuer à la gouvernance des données et aux bonnes pratiques data engineering
Collaboration et amélioration continue
- Collaborer avec les équipes data science, BI et métiers
- Participer aux revues techniques et à la documentation des pipelines
- Contribuer à l’amélioration continue de la plateforme data
Environnement technique associé :
- Google Cloud Platform (GCP)
- Snowflake
- DBT
- SQL / Python
- Data Warehouse / Data Lake
- Outils d’orchestration (Airflow, Cloud Composer ou équivalent)
- CI/CD et bonnes pratiques DevOps appliquées à la data