Trouvez votre prochaine offre d’emploi ou de mission freelance Hadoop

Mission : En tant que Data Scientist (H/F), vous serez en charge des missions suivantes : • Concevoir et développer les futures fonctionnalités de la plateforme sous Google Cloud Platform. • Concevoir les flux d'alimentation et les tables (structure de donnée). • Automatiser et industrialiser les flux. La stack technique : • Maîtrise des outils permettant de gérer les gros volumes de données (stockage HDFS, calcul distribué, …) via Spark. • Expérience significative dans la mise en production de solutions de ML ayant un impact à grande échelle sur les clients. • Maîtrise des pratiques de packaging ML et de mise en place des architectures AI avancées. • Maîtrise des environnements de développement sur le Cloud (ex : AWS, SageMaker, DataBricks, etc.). • Maîtrise des outils de développement : Git, Github, CI/CD, VSCode/Pycharm, Terminal. • Maîtrise de l'Anglais indispensable.

Almatek recherche pour l'un de ses clients, Un Expert KM en environnement data sur Paris. Contexte : Migration du stack technique du monde Hadoop vers Oracle Exadata avec réurbanisation de l’entrepôt de données selon les principes de Kimball et Inmon avec une approche du type DataMesh. Le client souhaite casser notre bloc monolithique de l’entrepôt en bloc par domaine (approche micro service) Excellente maitrise de ODI : Capable de mettre en place des KM (Knowledge Module) du type historisation, gestion de log, gestion de la qualité des données etc… J’insiste sur ce point, il s’agit de compétence forte sur la stack ODI avec capacité de mettre en place des briques génériques réutilisable (fort niveau d’abstraction) Excellente maitrise en terme de conception et de modélisation des données pour accompagner les équipes projets dans le cadre de la refonte (passage du monde Hadoop vers Oracle Exadata) en respectant les patterns d’architecture data que nous sommes en train de mettre en place. Excellente maitrise en terme d’optimisation des requêtes (savoir lire un plan d’exécution et être en capacité à proposer des améliorations (indexation, partitionnement…) pour améliorer les performances des requêtes.

Contribuez à des projets data complexes avec des technologies avancées. Quel sera votre rôle ? Nous recherchons un(e) Data Engineer Scala / Spark. Vous rejoignez l’équipe d’ingénierie data pour concevoir des pipelines de traitement de données à grande échelle. Au quotidien, vos missions seront les suivantes : Développer et optimiser des pipelines de données en utilisant Scala et Spark, dans un environnement distribué. Mettre en place des modèles de données complexes en SQL pour répondre aux besoins métier. Collaborer avec les data scientists pour garantir l’efficacité des flux de données et des modèles analytiques. Environnement technique : Scala, Apache Spark, SQL, Hadoop, Kafka