logo

Data Engineer GCP


Décryptage du poste par Postule AI

À propos du rôle

Au sein d'un Centre de Services Data, vous interviendrez sur la conception, le développement et la maintenance de collectes de données sur Google Cloud Platform. Vous travaillerez dans un environnement Agile/DevOps avec GitLab CI/CD, en gérant des projets à fort volume et forte criticité.

Missions principales

  • Développer et faire évoluer des pipelines de collecte de données batch et streaming
  • Concevoir des flux d'ingestion, transformation et exposition de données sur GCP
  • Développer des traitements Python et SQL pour l'alimentation des plateformes Data
  • Implémenter et maintenir des solutions basées sur BigQuery, Dataflow, Composer (Airflow), Pub/Sub, Cloud Run et GCS
  • Réaliser les analyses d'impact, les tests, les mises en production et le support des collectes existantes
  • Garantir la qualité, la performance, la fiabilité et la traçabilité des données

Compétences requises

  • GCP (BigQuery, Dataflow, Composer, Pub/Sub, Cloud Run, GCS)
  • Python et SQL
  • Airflow et orchestration de traitements
  • Data Engineering, ETL/ELT et collecte de données
  • Expérience Kafka, Spark ou Nifi (un plus)

Profil recherché

  • 2 à 6 ans d'expérience en Data Engineering
  • Expérience significative sur GCP et BigQuery
  • Bon niveau de communication en français
  • Capacité à travailler sur des sujets de collecte de données à fort volume et forte criticité

Cette description d'emploi a pu être reformatée par Postule pour améliorer sa lisibilité et sa présentation. Le contenu et les informations restent fidèles à l'offre d'emploi originale. .