Partager cette offre
Expertises spécifiques :
Nous recherchons un profil Hadoop / PySpark qui sera en charge, en lien avec l'équipe de production applicative / devops, de mettre en œuvre techniquement les évolutions du datalake. Passionné par les données, capable de s’adapter à un environnement dynamique et en constante évolution, le prestataire doit faire preuve d'autonomie, d'initiative et d'une forte capacité d'analyse pour résoudre des problèmes complexes.
Les tâches suivantes seront confiés au consultant :
• Mettre en œuvre de nouvelles ingestions de données, data prep/transformation
• Maintenir et faire évoluer nos outils de gestion des pipeline de données (Pyspark + shell scripting)
• Adresser à l'équipe devops les demandes relatives aux évolutions de la plateforme
• Eventuellement mettre en œuvre une couche d'APIs afin d'exposer nos données
Profil recherché
Le consultant idéal devra posséder les compétences suivantes :
• Excellente maîtrise de la plateforme Hadoop, ainsi que du développement en Python/PySpark et Hive. Une bonne connaissance de SQL, GIT, Jenkins, Jira, et du shell scripting sous Unix/Linux est également nécessaire.
• Maîtrise de l'anglais, tant à l'écrit qu'à l'oral, pour faciliter les échanges avec nos interlocuteurs basés à Porto, qui représentent une part importante de notre équipe IT.
• Expérience dans des environnements agiles, en particulier avec la méthodologie SCRUM.
• Connaissances et expériences avec des outils et technologies tels que Indexima, Alteryx, Altair, GCP/Big Query, ainsi que des bibliothèques Python orientées API seraient des atouts appréciables.
• Capacité à rédiger des spécifications techniques claires et précises.
• Dynamisme, excellent relationnel et capacité à travailler en équipe.
• Force de proposition et curiosité technique pour explorer de nouvelles solutions et technologies.
Environnement de travail
VISIAN est une société de conseil spécialisée autour de l'innovation, la conception produit, le développement et la data.
Dans le cadre de nos projets clients, nous recherchons un Data Engineer Pyspark / Hadoop
Postulez à cette offre !
Trouvez votre prochaine mission parmi +9 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
