Data Engineer GCP (Pub/Sub, DBT)

Le/la consultant(e) aura pour responsabilités :

  • Développement et maintenance des pipelines de transformation de données avec DBT.
  • Manipulation et traitement de gros volumes de données via BigQuery et SQL avancé.
  • Gestion des flux de données et intégration avec Pub/Sub.
  • Automatisation des workflows data via GitLab CI/CD et Docker Compose.
  • Développement de traitements batch pour l’alimentation et l’export des flux de données.
  • Mise en production des IHM génériques via inserts SQL.
  • Développement de scripts Shell Bash dans un environnement Linux.
  • Utilisation du framework interne Carrefour (Génépi).
  • Collaboration avec l’équipe Flux dans un environnement Agile.

Diplômé(e) d’un Bac+5 en école d'ingénieur ou équivalent universitaire avec une spécialisation en informatique, ou justifiant d'une expérience significative équivalente.

Expérience : +7 ans en Data Engineering.

Compétences requises :

  • DBT, SQL avancé, BigQuery, GCP, Pub/Sub, GitLab CI/CD, Docker Compose, PostgreSQL, Linux, Shell Bash, Git, Vim, Agile Scrum.

Looking forward to hearing from you !

Similar jobs