DEVOTEAM

Ingénieur Data Senior Spark Scala

Rabat

CDI / Temps pleinHybrideIngénieur / École d'ingénieursFrançais, AnglaisData / BIInformatique / IT

L’essentiel du poste

Résumé par Postule AI

Devoteam recherche un Ingénieur Data Senior expérimenté en Spark et Scala pour rejoindre sa tribu Data Foundation au Maroc. Vous concevrez et maintiendrez des pipelines de données performants, travaillerez sur des transformations complexes à grande échelle, et collaborerez avec des équipes multidisciplinaires. Ce rôle offre une excellente opportunité de croissance dans un environnement agile, avec accès à une communauté Data internationale et des formations continues sur les technologies cloud et data modernes.

Vos missions

  • Concevoir, développer et maintenir des pipelines de données efficaces pour l'extraction, transformation et chargement vers des systèmes Lakehouse
  • Écrire du code Scala et Apache Spark pour réaliser des transformations complexes sur de grands volumes de données
  • Optimiser les performances des pipelines en identifiant et résolvant les problèmes, en ajustant la configuration Spark et en appliquant les meilleures pratiques
  • Collaborer avec d'autres équipes pour intégrer les pipelines avec des bases de données SQL, NoSQL, Kafka et systèmes de fichiers
  • Mettre en œuvre les mécanismes de sécurité (authentification, autorisation, chiffrement, anonymisation) pour protéger les données sensibles
  • Concevoir et mettre en œuvre des pipelines de traitement en temps réel utilisant Spark Streaming

Profil recherché

  • Vous maîtrisez Apache Spark et Scala avec une expérience confirmée en Data Engineering
  • Vous aimez travailler en mode agile et collaborer avec des équipes multidisciplinaires
  • Vous êtes passionné par la data et souhaitez développer une double compétence dev/infra
  • Vous recherchez une opportunité de croissance dans un environnement international avec formation continue
  • Vous êtes à l'aise avec l'anglais et avez d'excellentes compétences en communication

Généré automatiquement à partir de l’offre. Postule AI peut se tromper : vérifiez auprès de l’employeur.

À propos du rôle

Rejoignez Devoteam Data Driven en tant qu'Ingénieur Data Senior spécialisé en Spark et Scala. Vous serez un maillon essentiel au sein de la tribu Data Foundation, responsable de la conception, du développement et de la maintenance de pipelines de données performants pour transformer les données en informations exploitables.

Responsabilités principales

  • Concevoir, développer et maintenir des pipelines de données efficaces pour extraire, transformer et charger les données vers des systèmes Lakehouse (datalake, datawarehouse)
  • Écrire du code Scala et Apache Spark pour réaliser des transformations complexes sur de grands volumes de données
  • Identifier et résoudre les problèmes de performance dans les pipelines, en optimisant les requêtes Spark et en mettant en œuvre les meilleures pratiques
  • Collaborer avec d'autres équipes pour intégrer les pipelines avec des bases de données SQL, NoSQL, Kafka et systèmes de fichiers
  • Concevoir et mettre en œuvre des pipelines de traitement en temps réel utilisant Spark Streaming
  • Mettre en place les mécanismes de sécurité (authentification, autorisation RBAC/ABAC, chiffrement, anonymisation) pour protéger les données sensibles

Compétences requises

  • Maîtrise avérée d'Apache Spark et Scala
  • Expertise en Python et pySpark
  • Connaissance des outils d'orchestration (Apache Airflow, Databricks Jobs, Apache Oozie)
  • Double compétence développement (Java, Scala, Python) et infrastructure (Linux, Ansible, Kubernetes)
  • Maîtrise des principes ETL/ELT et des outils associés (Talend, Apache Nifi, dbt)
  • Expérience avec Kafka et Spark Streaming
  • Maîtrise des outils CI/CD (Jenkins, Gitlab) et travail en mode agile
  • Excellentes compétences en communication et travail en équipe

Qualifications

  • Diplôme d'ingénieur ou équivalent
  • 3 à 5 ans d'expérience post-diplôme en Data Engineering
  • Certifications en Spark, Databricks, Azure ou GCP (un plus)
  • Anglais courant

Ce que nous offrons

  • Un manager à vos côtés en toute circonstance
  • Accès à une communauté Data avec Ideation Lab, Hackathons et Meetups
  • Formation continue via myDevoteam Academy sur les technologies actuelles et futures
  • Opportunités de développement vers Tech Lead Cloud, Architecte Data ou Expert DataOps
  • Possibilités d'investissement personnel : formateur interne, leader de communauté, participation aux recrutements

Informations pratiques

  • Localisation : Rabat et/ou Casablanca, Maroc
  • Contrat : CDI
  • Mode de travail : Hybride avec possibilité de télétravail
  • Secteurs d'activité : distribution, énergie, finance, industrie, santé, transports

Mise en forme par Postule ·

Signaler un problème