Le poste skiils se renforce et cherche son Data engineer confirmé
Partager cette offre
Data Engineer maitrisant(e) pyspark et airflow qui aidera le client à construire de nouveaux indicateurs et à les fiabiliser.
L"équipe Forecast a pour mission de mettre à disposition dans le Datalake , les datasets qui concernent les prévisions de ventes.
Pour remplir à bien sa mission, le Data Engineer devra :
- Comprendre un modèle de données et s'en servir,
- Aider l'équipe à faire les meilleurs choix techniques,
- Apporter une expertise sur la conception des indicateurs,
- Maîtriser les bases de données et les outils de transformation,
- Etre capable de transformer une donnée brute en un indicateur
Profil recherché
plus de 2 ans d'expérience en tant que Data Engineer PySpark et AirFlow .
Stack AWS (S3, ECR, CodeArtefact, EMR) et maîtrise de ses composants.
Agilité dans un environnement collaboratif (GitHub, SCRUM).
bon niveau d’anglais
En lien avec les autres Data Engineers de l'équipe, la connaissance de Databricks est appréciée.
Environnement de travail
Transformation de données : PySpark, Pandas
Langages : Python, SQL
BDD : Databricks SQL Warehouse
Datalake : AWS S3
Versionning, CI/CD : GitHub, GitHub Actions
Ordonnanceur : Airflow
Cluster : AWS EMR
Postulez à cette offre !
Trouvez votre prochaine mission parmi +6 000 offres !
-
Fixez vos conditions
Rémunération, télétravail... Définissez tous les critères importants pour vous.
-
Faites-vous chasser
Les recruteurs viennent directement chercher leurs futurs talents dans notre CVthèque.
-
100% gratuit
Aucune commission prélevée sur votre mission freelance.
skiils se renforce et cherche son Data engineer confirmé
skiils