Offre d'emploi DATA ENGINEER GCP SPARK SCALA

Nous recherchons un data engineer GCP Spark/Scala avec pour missions principales :

• Collecter des données provenant de diverses sources externes.

• Exploiter les capacités du Datalake sur GCP.

• Implémenter l’ensemble du processus incluant :

  • L’ingestion des données,

  • La validation des données,

  • Le croisement des données,

  • L’intégration des données enrichies dans le Datalake.

• Développer en respectant les principes d’architecture définis.

• Rédiger et documenter les user stories en collaboration avec le Product Owner.

• Rédiger les scripts nécessaires au déploiement.

• Identifier et prioriser la correction des anomalies.

• Assister les équipes en charge de l’exploitation.

• Contribuer à la mise en place d’une chaîne de livraison continue.

• Automatiser les tests fonctionnels.

• Encadrer et superviser le travail des data engineers de la squad.