Le poste DATA ENGINEER SPARK / SCALA / DATABRICKS
Partager cette offre
Bonjour,
Pour le compte de notre client nous recherchons un data engineer spark / scala / databricks.
S’agissant d’un projet mené en agilité, le découpage des livrables est réalisé par sprints.
Le contenu de chaque sprint est identique, seul le détail des US (User Stories) change. A noter
que ces livrables sont réalisés par l’équipe projet, il n’y a pas de responsabilité de production
individuelle.
Livrables n°1 : Sprint n°1
+ Lot 1 : développement des US et tests associés ;
+ Lot 2 : Documentation projet, mapping des données, modélisation des pipelines,
documents d’exploitation ;
+ Lot 3 : Mise en place du CI/CD sur notre usine logicielle ;
+ Lot 4 : Mise en place du monitoring ;
Les compétences technologiques attendues sont :
Interne
+ Indispensables : maîtrise de l'API Scala Spark (batch principalement), maîtrise des
techniques d'optimisation Spark, expérience dans le traitement de volumétries
importantes / complexes, développement et bonnes pratiques Scala, build Maven, travail
en environnement cloud (idéalement Azure)
+ Appréciées : écosystème Databricks, briques Azure Function et Azure Data Factory,
monitoring sous Datadog, déploiement Ansible.
Profil recherché
Bac + 5 informatique
Profil technique
Expertise spark / scala / databricks
Très bonne communication
Apprécié Azure
Qualité relationnelles et aisance orale.
Environnement de travail
Batiments neufs
Quartier d'affaires
TT : 3 Jours / semaine
Ambiance friendly
Culture consulting
Point réunion régulier pour assurer un maximum de proximité et avancer en mode agile sur les projets
Postulez à cette offre !
Trouvez votre prochaine mission parmi +6 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
DATA ENGINEER SPARK / SCALA / DATABRICKS
UCASE CONSULTING