Le poste DATA ENGINEER AZURE SCALA PYSPARK
Partager cette offre
Vous rejoindrez une Data Factory, dont l'objectif est de concevoir et déployer des solutions Analytics innovantes pour les magasins, les fonctions support, la logistique, et surtout, les consommateurs.
Notre client visent à industrialiser nos pratiques pour accélérer la livraison de nos produits tout en maximisant l'utilisation de notre patrimoine de données.
Vous intégrerez une squad dédiée au développement de cas d'usage en BI, Analytics et Data Science, sur leur plateforme Data hébergée sur le Cloud Azure.
Profil recherché
Missions :
- Collaborer avec le Product Owner et les équipes métier pour définir les besoins
- Concevoir et développer des pipelines de données pour la collecte, la transformation et le traitement dans le Data Lake sur Azure
- Créer des notebooks pour le traitement avancé des données avec Databricks en utilisant Spark, Scala, SQL et Python
- Modéliser les données et gérer le stockage au niveau du Data Lake (formats Parquet, Delta)
- Effectuer des tests unitaires pour garantir la qualité du code
- Rédiger la documentation technique nécessaire (analyses, notes de livraison, etc.)
- Préparer les packages pour intégration continue et livraison avec les équipes DevOps
- Assurer la maintenance corrective et évolutive des solutions mises en place
- Participer aux réunions agiles (Sprint Planning, Daily, Sprint Review, Démos, etc.)
- Contribuer aux activités de la communauté Data, y compris les groupes de travail et les meetups avec des partenaires comme Microsoft et Databricks
Postulez à cette offre !
Trouvez votre prochaine mission parmi +6 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
DATA ENGINEER AZURE SCALA PYSPARK
DATSUP
