Data Engineer GCP (Google Cloud Platform) Medium – Produit Data Supply Chain

Contexte

Intégration dans une équipe produit (PO – Product Owner / PPO – Proxy Product Owner + Data Engineer) pour opérer et faire évoluer une plateforme de prévision d'approvisionnement fournisseurs, en production, à forte volumétrie de données.

Missions

• Conception, développement et optimisation de pipelines ETL/ELT (Extract, Transform, Load – processus de traitement de données) sur GCP (Google Cloud Platform) : BigQuery, Dataflow, Cloud Composer/Airflow, Pub/Sub, Cloud Storage
• Modélisation et gestion de la qualité des données dans BigQuery
• Run opérationnel N2/N3 (support technique avancé) : scripting Bash, requêtes SQL (Structured Query Language) complexes, gestion d'incidents
• Monitoring et alerting des flux de données (Grafana, Looker Studio, ELK Stack – Elasticsearch, Logstash, Kibana)
• IaC (Infrastructure as Code – gestion de l'infrastructure via du code) avec Terraform
• Collaboration Agile/Kanban avec les équipes produit et métier

Stack technique

GCP (Google Cloud Platform) · BigQuery · Oracle · Bash · Terraform · GitLab CI (Intégration Continue) · Grafana · Looker Studio · ELK (Elasticsearch, Logstash, Kibana) · RedHat 9.4 · Azure (périmètre éditeur)