Trouvez votre prochaine mission ou futur job IT.

Vos missions ? Intégré à nos équipes sur nos projets en Factory ou chez nos clients vous interviendrez en tant que data Engineer. En tant que data Engineer (H/F), vous assurez les missions suivantes : Conception de solutions permettant le traitement de volumes importants de pipelines données. Ceux-ci doivent être suffisamment sécurisés et lisibles pour les Data Analysts et Data Scientists. Animation d'une équipe de professionnels de la Data sur toutes les étapes du traitement de la donnée. Mise à jour permanente sur les technologies et langages utilisés dans le but de partager ses connaissances et aider à l'avancement du projet.

Bonjour, Pour le compte de notre client nous recherchons un data engineer spark / scala / databricks. S’agissant d’un projet mené en agilité, le découpage des livrables est réalisé par sprints. Le contenu de chaque sprint est identique, seul le détail des US (User Stories) change. A noter que ces livrables sont réalisés par l’équipe projet, il n’y a pas de responsabilité de production individuelle. Livrables n°1 : Sprint n°1 + Lot 1 : développement des US et tests associés ; + Lot 2 : Documentation projet, mapping des données, modélisation des pipelines, documents d’exploitation ; + Lot 3 : Mise en place du CI/CD sur notre usine logicielle ; + Lot 4 : Mise en place du monitoring ; Les compétences technologiques attendues sont : Interne + Indispensables : maîtrise de l'API Scala Spark (batch principalement), maîtrise des techniques d'optimisation Spark, expérience dans le traitement de volumétries importantes / complexes, développement et bonnes pratiques Scala, build Maven, travail en environnement cloud (idéalement Azure) + Appréciées : écosystème Databricks, briques Azure Function et Azure Data Factory, monitoring sous Datadog, déploiement Ansible.

Vos missions ? En tant qu'Ingénieur Data, vous serez responsable de la conception, du développement et de la maintenance de solutions data au service des différents métiers de l'entreprise . Aux côtés d'experts métiers, et au sein d'une équipe agile, vous devrez répondre aux différents besoins de l'entreprise : - Définir les architectures des solutions avec le reste de l'équipe, - Fabriquer et tester les solutions, - Déployer dans les différents environnements, - Garantir le bon fonctionnement en production, - Entrainer et tester des modèles de Machine Learning. La stack Technique : - Spark, Kafka, Java - Python, PY Spark - Docker, Jenkins - Gitlab/Github - Grafana

Vos missions ? En tant qu'Ingénieur Data, vous serez responsable de la conception, du développement et de la maintenance de solutions data au service des différents métiers de l'entreprise . Aux côtés d'experts métiers, et d'un Leader Technique, vous devrez développer des traitements robustes, monitorés et résilients dans un écosystème Cloud avec des technologies d'industrialisation à l'état de l'art. Vos traitements répondront à des besoins autour de problématiques complexes dans les domaines d'activité de l'entreprise (Réseau & système IOT, évolutions possibles sur comptage de l'eau, gestion des déchets, etc …) La stack Technique : - MongoDB, PostgreSQL, Power BI - Python, Scala, R - Docker, Jenkins - Gitlab/Github - Grafana

Vos missions ? En tant que Lead Ingénieur Data, vous serez responsable de la conception, du développement et de la maintenance de solutions data au service des différents métiers de l'entreprise . Aux côtés d'experts métiers, et d'un Leader Technique, vous devrez développer des traitements robustes, monitorés et résilients dans un écosystème Cloud avec des technologies d'industrialisation à l'état de l'art. Vos traitements répondront à des besoins autour de problématiques complexes dans les domaines d'activité de l'entreprise (Réseau & système IOT, évolutions possibles sur comptage de l'eau, gestion des déchets, etc …) La stack Technique : MongoDB, PostgreSQL Python (lib : Pandas, Scikit Learn, Tensorflow, Matplotlib, Plotly...) Scala, R, Docker, Jenkins Gitlab/Github Grafana

Nous recherchons pour le compte d'un groupe international renommé un Ingénieur Données Senior pour une durée initiale de 6 mois avec possibilité d'extension. Rôle : Senior Ingénieur Data Lieu: Lyon Durée : 6 mois (extensible) Travail Hybride : 2 jours travail par semaine Date de début : Janvier/Février 2025 Principales responsabilités : Vous travaillez sur la migration de Talend vers DBT, en assurant une intégration transparente. Concevoir, développer et optimiser des pipelines de données évolutifs, des schémas et des processus pour notre nouvel entrepôt de données. Collaborer avec des équipes interfonctionnelles pour fournir des solutions de données de haute qualité. Vous êtes en charge de l'organisation et de la mise en œuvre de l'ensemble des activités de l'entreprise, de la conception à la mise en œuvre.

Compétences technologiques indispensables : Maîtrise de l'API Scala Spark (principalement pour les traitements batch). Expertise dans l'optimisation des performances Spark, avec une expérience avérée dans le traitement de volumétries importantes et complexes. Solide expérience en développement Scala et bonnes pratiques de codage. Compétences en build Maven et gestion des dépendances. Expérience de travail dans un environnement cloud (idéalement sur Azure ou AWS ). Compétences appréciées : Connaissance d' IBM Datastage et de son écosystème. Expérience avec Databricks , ses outils et ses services. Compétences transverses : Aisance relationnelle et capacité à travailler efficacement avec différentes parties prenantes. Esprit d'équipe et forte capacité d'adaptation aux évolutions des projets. Rigueur, sens de l’analyse et capacité à faire preuve d’une synthèse pertinente. Autonomie dans la gestion des tâches et des projets. Force de proposition pour améliorer les processus et l’efficacité des projets. Sens des priorités et gestion rigoureuse des délais dans un environnement dynamique. Capacité à travailler en mode multi-projets , tout en maintenant une vision globale des enjeux. Appétence pour comprendre les besoins clients et fonctionnels, et capacité à transformer ces besoins en solutions techniques pertinentes. Compétences en mentorat et partage de connaissances au sein de l'équipe.

Bonjour, Dans le cadre de ses projets clients, Visian est à la recherche d'un Senior Data Engineer Azure Data factory : Principales responsabilités du poste : S'assurer que les modèles sont expliqués et compris. Valider les développements au cours des premiers mois. Répondre aux questions des ingénieurs en données et assurer la liaison avec l'architecte si nécessaire. Garantir que tous les développements respectent les politiques de l'équipe et que les performances sont optimales. Mettre en œuvre ou participer à des développements complexes. Développer des normes et un kit de développement (pipelines de données, journaux, CI/CD, surveillance de la qualité des données). Accompagnement des profils juniors Qualités attendues : Capacité à travailler en mode collaboratif au sein d'une squad pour livrer dans tous les environnements. Avoir une attitude orientée client. Capacité à collaborer avec des ressources offshore. Savoir communiquer entre les aspects techniques et non techniques. Si vous êtes actuellement à l'écoute du marché, je vous invite à m'envoyer votre candidature. Bien à vous, Nadia

-Nous recherchons un(e) développeur BI (Data Engineer) avec des expériences significatives sur des projets stratégiques liés à l’évolution, la modernisation et l’optimisation d’un système d’information . Le Data Engineer est un acteur clé dans la mise en œuvre et la coordination des différentes initiatives de gestion des données, en assurant le lien entre les équipes métiers et IT : -Le Data Engineer est chargé(e) d'analyser les processus de gestion des données existants, d'identifier les opportunités d'amélioration et de mettre en œuvre des solutions innovantes pour optimiser les opérations de données et répondre aux besoins spécifiques. -Le Data Engineer sera intégré au pôle Management & Support dans l’équipe Data.

PROPULSE IT recherche un Lead Data Ingénieur ayant près de 10 ans d'expérience pour un de ses clients En tant que Lead Data Engineer, vous travaillerez au sein de l'équipe digitale « data et performance », en charge principalement de l'infrastructure data, et du traitement, de l'intégration et de la transformation de la donnée digitale d'Hermès (hermes.com). Vous serez aussi garant·e de sa qualité et sa sécurité et le respect de la vie privée liée à cette donnée. Vous serez rattaché·e au Data Manager et vous animez et pilotez une équipe de 2 Data Engineer au quotidien. Vous travaillerez principalement sur le Cloud de Google (GCP), mais aussi en partie sur le Cloud Amazon (AWS). Le respect de la vie privée étant au cœur de de votre travail, vous devrez être conscient des problématiques liées à la GDPR. Des connaissances sur les problématiques liées à l'e-Commerce sont un plus. Principales Activités : Industrialisation de l'infrastructure de la Data Platform sous GCP - Vous avez pour principale mission d'accompagner l'équipe Data et Performance dans l'industrialisation de sa plateforme data via : - Mise en place d'environnements dédiés et cloisonnés (Dev / Preprod / Production) - L'automatisation du déploiement et la maintenance des environnements via des outils d'infrastructure as code (Terraform) sous GCP - Mise en place de solutions d'observabilités (monitoring, alerting) au sein de GCP Manipulation/Transformation de données (en batch et stream) - Vous accompagnerez aussi l'équipe Data dans ses activités de transformation de données via : - Maintenance pipelines de données en python (batch et stream) - Des pipelines de transformation en SQL/SQLX dans l'outil DataForm (similaire à DBT) - Mise en place et maintenance d'un outil de data quality (ex : great expectations en python) - Aider au développement des workers dans les Cloud AWS pour récupérer la donnée depuis Kafka et l'envoyer vers PubSub dans GCP. - La connaissance de l'outil DataFlow (Apache Beam) est un plus. Collaboration avec les équipes du pole, centrée sur la donnée de qualité - Standardisation de la base de code de l'équipe (linting, CI/CD, divers tests - Maintien et réalisation de schémas d'architectures et documentation des processus internes - Collaboration avec les autres équipes du pôle Data : data analysts, SEO/SEA et emailing - Aider à la mise en place de bonnes pratiques : - Anonymisation et archivage de la donnée dans le respect du RGPD et de la politique interne du traitement de données - Sécurité de l'infra, de la data et du code

Notre client, en pleine transformation digitale, cherche à unifier ses équipes digitales et data pour améliorer l'accès, la gestion et l'exploitation des données. En tant que Data Engineer , vous jouerez un rôle clé dans cette transformation en concevant et optimisant les flux de données au sein d’un environnement AWS et Snowflake . Votre mission inclut l’ingestion, la transformation et la modélisation des données, tout en automatisant les processus pour garantir une intégration continue et fiable dans les projets stratégiques de l’entreprise. Vous collaborerez étroitement avec les équipes métiers et techniques pour répondre aux enjeux de la Data & Tech Factory.

SA MISSION : Il est garant de l'accès qualitatif aux sources de données. Il s'assure de la maîtrise de la donnée et est garant de la qualité de son utilisation (référencement, normalisation, et qualification) afin d'en faciliter l'exploitation par les équipes (Data Analysts et Data Scientists). Il contribue également à la définition de la politique de la donnée et à la structuration de son cycle de vie dans le respect des réglementations en vigueur, en collaboration avec le Chief Data Officer. Son périmètre d'intervention est axé sur les systèmes applicatifs autour de la gestion de la donnée et du traitement, et sur les plateformes Big Data, IoT, Il assure la supervision et l'intégration des données de diverse nature qui proviennent de ces sources multiples et vérifie la qualité des données qui entrent dans le Data Lake (il recette de la donnée, supprime les doublons, ). SON ACTIVITE : QUALIFICATION ET GESTION DES DONNÉES : - Capte les données (structurées et non structurées) produites dans les différentes applications ou à l'extérieur de l'entité - Intègre les éléments - Structure la donnée (sémantique, etc.) - Cartographie les éléments à disposition - Nettoie la donnée (élimination des doublons, ) - Valide la donnée - Éventuellement, il crée le référentiel de données SES LIVRABLES : - Data Lake approprié et partagé et son dimensionnement - Cartographie des données - Les éléments permettant de garantir la qualité de la donnée

Au sein de la DSI France, vous apporterez vos compétences de data engineer dans le cadre d’un projet de refonte de la plateforme data. Missions & activités : · Participer à la mise en place de l’infrastructure · Participer activement à la construction et la spécification des modèles de données · Développer des processus d'extraction, de transformation et de chargement (ETL) pour intégrer des données de différentes sources. · Rédiger la documentation technique et fonctionnelle des flux de données · Travailler en étroite collaboration avec les équipes de data science et de data analytics.

Une expérience de minimum 2 ans dans l’utilisation de Netvibes est indispensable pour cette opportunité. Dans le cadre de l’exploitation et du développement des applications Netvibes, le Data Engineer Netvibes est responsable de la conception, du développement, et de la maintenance des solutions data. Ce rôle requiert une expertise dans l’écosystème Netvibes (Data Perspectives, Data Queries, Data Model) et une capacité à livrer des solutions robustes, ergonomiques et en phase avec les besoins métiers. Missions principales : Développement des applications Netvibes : Évaluer les délais nécessaires pour les tâches à réaliser et rédiger leur description technique (ex. estimation de points de complexité, rédaction des tâches sous JIRA ). Contribuer au product backlog Concevoir le modèle de données , en coordination avec les Data Perspectives existantes ou à créer. Développer des solutions sur les briques data Netvibe s : Visualisations et ergonomie des Data Perspectives. Data Queries pour extraire les données pertinentes. Data Model structurant les données nécessaires. Exploration des données PLM 3DX. Qualité et performance des développements : Réaliser des tests unitaires et agiles pour garantir la fiabilité des livrables. Respecter les engagements de performance (points de complexité) et maintenir une vélocité définie avec l’entreprise. Exploiter efficacement l’environnement de développement fourni par l’entreprise. Documentation et support : Rédiger une documentation claire et complète des développements réalisés. Assister les équipes d’exploitation dans les phases de mise en production. Prendre en charge la correction des anomalies identifiées sur les solutions mises en œuvre (support de niveau 2 ou 3). Maintenance et amélioration continue : Maintenir en conditions opérationnelles les cas d’usage en phase post-projet. Participer à la rédaction de la Documentation d’Architecture Technique pour accompagner les évolutions d’infrastructure.

prestation qui devra contribuer à des sujets tranversaux couvrant les activités aussi bien pre-closing/origination(front) que post-closing/financements structurés(back), sur les programmes Datalake, Interlagos ainsi que sur Pegasus, programme de refonte du modèle opérationnel de GLBA (orginate to distribute). Le bénéficiaire souhaite mettre en oeuvre plusieurs évolutions de son socle technique. La prestation devra avoir une expertise des différents aspects techniques de son socle (Azure, Scality, Spark, Hive, Postgre) et de l'architecture technique préconisée au sein de GBTO. A ce titre, le Bénéficiaire souhaite bénéficier de l'expertise du Prestataire en termes de Data Engineering. Dans ce cadre , la prestation consiste à contribuer à : - L'intégration des cas d’usages Datalake dans le SI avec l'Architecture Techniques - Identifier et prévenir les risques éventuels de dérapages en terme de coûts et de délais et proposer le cas échéant des moyens pragmatiques et cohérentes afin de mitiger le risque identifié. - Développement et Implémentations des collectes de données, des jobs de traitement et Mapping de données (Spark/Scala/SparkSQL) - Développement des moyens de restitution via génération de fichier et ou API & Dashboarding ( Java Spring Batch/Boot, rest API, Postgres) - A l'amelioration de la chaîne de livraison continue ( Jenkins, Sonar, Nexus , Kubernetes) - Mise en place de la revue de code avec l'entité Avec l'Architectures Techniques dans les choix d'implémentation au sein du SI - Contribuer aux préconisations en termes d'architecture big data - Mise en place des moyens techniques en conformité avec les lignes directrices fixées par les métiers, les normes et standard SG - Garantir de la qualité et de la maintenance technique du produit - S'assurer que la stratégie de test du produit est bien respectée - Contribution à la veille technique du périmètre et à sa diffusion

Missions : Conception et développement des pipelines de données de la Tribu 2IA ; Écriture de codes métiers, dans le respect des standards de développement ; Maintien en conditions opérationnelles de l'infrastructure de calculs sur les composants déployés et administrés par la Tribu 2IA ; Gestion du run et du bon déroulement des traitements Technologies : Iceberg, Kubernetes, Airflow, Spark, Python Savoir être attendu : Esprit d'analyse et de synthèse Force d’innovation et de proposition Curiosité Capacité à travailler en mode Agile