Trouvez votre prochaine offre d’emploi ou de mission freelance Apache Kafka

Vous interviendrez dans le cadre de la construction et de l'optimisation d’un programme d’ingestion de données pour une initiative d'IA. Ce poste requiert une solide expérience en ingénierie de données dans un environnement Big Data. Vous serez responsable de la gestion des données en temps réel à l’aide de technologies de streaming et de solutions cloud. Construire et optimiser le programme d’ingestion de données Collaborer avec l’équipe métier pour répondre aux besoins en matière de données et de traitement Big Data

Nous recherchons un/une Développeur(se) Senior EBX pour participer activement au grand programme, en développant un référentiel d’offres. Ce référentiel d’offres vise à rationnaliser nos processus métiers et à les mettre à disposition dans un écosystème d’outils modernes. Le candidat retenu aura comme missions principales la conception technique et les développements autour des données référentielles Profil recherché senior + de 8 ans d'expériences, Possibilité de télétravail 2 à 3 jours par semaine.

Ce département ou interviendra le Prestataire est de la gestion des données & de la business intelligence des systèmes d’informations : maintenance & alimentation du datawarehouse, conception de rapports, calculs et visualisation de KPI. La Prestation s’effectuera au sein de l’équipe d’une vingtaine de personnes composée de : ü Data Engineer, travaillant majoritaire à l’alimentation du Datawarehouse d’entreprise ü Data Architect travaillant sur les évolutions de la gestion des données au sein de l’entreprise. Les données sont principalement gérées au sein - D’un datawarehouse d’entreprise organisé autour de plusieurs instances de base de données ORACLE - D’un Datalake s’appuyant sur l’offre cloudera on premise L’équipe est en charge des évolutions, du support et de la maintenance du datawarehouse. Dans ce contexte, la prestation consiste à intervenir sur le POC (Proof of concept) en étroite collaboration avec l’administrateur du Data Lakehouse et à mettre en œuvre et valider l’infrastructure de plateforme de données. Dans ce cadre, le Prestataire contribuera et aura la responsabilité de : Ø POC Developpement : o Conception et développement du POC pour notre Data Lakehouse ouvert en utilisant les dernières technologies (Cloudera, NoSQL, NiFi, Apache Iceberg, DBT, Superset, etc.) pour répondre aux exigences de l’entreprise, Ø L’intégration des données : o Mise en œuvre des pipelines d’ingestion et d’intégration de données à partir de diverses sources tout en s’assurant la qualité et la cohérence des données. Ø Du processus ETL/ELT: o Développement et optimisation des processus ETL/ELT pour soutenir les besoins de data warehousing et d’analyse. Ø L’optimisation de la performance: o Analyse et optimisation de la performance des flux de données et des requêtes. Ø La collaboration : o Travail en étroite collaboration avec l’administrateur du Data Lakehouse pour assurer l’intégration et la fonctionnalité de l’infrastructure du Data Lakehouse. Ø La documentation : o Création et maintenance de documents techniques sur les pipelines de données, o l’architecture o les flux de travail. Ø L’innovation: o Rester à jour avec les technologies émergentes et les meilleures pratiques pour améliorer continuellement la plateforme de données.

Nous recherchons un Technical Leader afin de développer les aspects techniques des produits numériques tout en garantissant leur délivrabilité en proposant des arbitrages techniques et fonctionnels et en contrôlant la qualité des produits numériques. Ce que vous ferez : - Concevoir l'architecture logicielle du produit numérique sur votre périmètre et être responsable de son implémentation en parallèle de la qualité de développement de l'équipe - Prendre des décisions techniques et architecturales influencées par les données commerciales, le Digital Product Leader (Engineering Manager) et le Business Product Leader (Product Manager). - Garantir la mise en œuvre de bonnes pratiques assurant la qualité technique, la résilience, la sécurité et la maintenabilité, y compris la conformité avec les normes de codage et les règles de conformité - Macro-estimer les sujets sur la base des données commerciales - Diriger et/ou déléguer l'encadrement technique pour résoudre les problèmes difficiles avec les propriétaires de produits et l'équipe - Assurer la livraison du produit dans les délais et la pertinence des fonctionnalités développées - Rédiger et maintenir un bon niveau de documentation technique, permettant l'internalisation à partir et en dehors du domaine ; - Améliorer l'architecture globale de la solution de place de marché avec d'autres responsables techniques, architectes d'entreprise et architectes de données - Co-construire la feuille de route technique du produit avec le responsable de l'ingénierie - Décomposition des User Stories en tâches techniques avec l'équipe - Développer les compétences techniques des équipes, soutenir les développeurs par le biais du mentorat et du coaching et les suivre dans leurs tâches quotidiennes ; proposer des solutions pour résoudre les obstacles à l'amélioration continue de la qualité de l'information et de la communication.

CDI/Freelance/Portage 💼 – 2 jours de télétravail/semaine 🏠 – 📍 Lille – 5 ans d'expérience minimum Vous êtes passionné(e) par les nouvelles technologies et souhaitez participer au développement de produits innovants dans le domaine RH & RSE ? Lisez la suite... 🚀 Vos missions : Développer et maintenir des produits RH & RSE, couvrant des domaines comme la gestion des temps, le recrutement, et les enjeux sociétaux. Travailler sur des projets Front, Back et mobiles dans un environnement en pleine expansion. Contribuer au développement des ACL (Access Control Lists) pour l’intégration de nouveaux outils SaaS.

La mission consiste à : - Déploiement régulier des applications - Intégration continue - Gestion des outils de CI/CD - Gestion et automatisation des environnements des développeurs - Prise en compte de la sécurité dès la conception - Mise en place des bonnes pratiques auprès des utilisateurs - Gestion des incidents et des tickets de RUN remontés par les utilisateurs Compétences demandées : - Administration systèmes Gnu / Linux - Administration réseau (VPC, VPN, Firewall) - Kubernetes, Docker, Helm, GCP, Python, CI/CD ... - Stockage des données : PostgreSQL, MongoDB, Bigquery, ElasticSearch - Anglais un + Mission basée sur la métropole lilloise avec télétravail hybride

Au sein du département informatique en charge des développements pour le bénéfice de l’ALM Treasury, nous proposons une mission de développement .Net pour contribuer au développement autour de la nouvelle plateforme orientée services (SOA) ayant comme socle Kafka et Cassandra. La connaissance sur la technologie Angular est un plus puisque la mission s'articulera principalement autour de cette technologie. Milieu fonctionnel autour des outils Front Office. Objectifs - Développement C# .NET Core - Méthodologie : BDD/TDD - Utilisation de Kafka/Cassandra - Maintenance applicative - Documentation / Testing - Support L3

Nous recherche un Architecte / Lead technique Java/Kafka/Ansible pour notre client grand compte sur Lyon. En tant que pilier technique des équipes de développement, vous serez amené à : Définir la roadmap technique, prendrez des décisions stratégiques et assurerez la qualité des solutions de notre client. Piloter des projets d'envergure, en coordonnant les équipes et en garantissant leur succès. Favoriser l'innovation: Vous serez un moteur de l'innovation en identifiant de nouvelles opportunités et en expérimentant de nouvelles technologies. Vous coacher et mentorer les équipes, en partageant votre expertise et en favorisant leur montée en compétences. Vos principales responsabilités seront de : Structurer les chantiers techniques et définir la roadmap. Piloter des projets complexes et garantir leur succès. Favoriser l'innovation et l'expérimentation. Développer les compétences des équipes. Assurer une veille technologique active. Environnement technique : Kafka, Java/springboot, angular, ansible, gitLab, jenkins, bitbucket, Terraform, Grafana, postgreSQL, openstack

Vous réaliserez le diagnostic de la plateforme d’échange et d’intégration, définirez une architecture cible et proposerez une trajectoire de transformation. Votre rôle Analyse et diagnostic · Evaluer l’existant (technologies, architectures, flux…) · Réaliser des audits en collaboration avec les équipes concernées Définition d’une architecture cible · Elaborer une architecture cible répondant aux enjeux de scalabilité, résilience et maintenabilité · Proposer des technologies adaptées (RabbitMQ, Kafka, MQ Series... · Définir la trajectoire pour la mise en œuvre Collaboration et documentation · Collaborer avec les équipes d’architecture technique et de gestion des flux · Challenger les experts internes · Rédiger un diagnostic détaillé et structuré

La mission consiste à : - Contribuer à la définition des spécifications générales - Réaliser l’analyse technique et l’étude détaillée - Développer les modules (objets et composants logiciels) - Elaborer les jeux d’essai pour les tests unitaires d’intégration et effectuer les tests - Préparer les mises en production - Mission basée en métropole lilloise avec présence sur site client de 3j/semaine Compétences demandées : - 3 ans min. d’expérience en développement Java EE et environnement Cloud - Java (11+), SpringBoot, NoSQL... - API Rest / Kafka - Environnement Cloud (GCP) - Outils de CI/CD, culture devops - Maîtrise de Python - Maîtrise et pratique de l’Agile - Anglais un+

Mission : Notre client grand compte recherche au sein de ses équipe un développeur sénior pour intervenir sur la facilitatio de l'authentification et de la gestion des données clients. Une expérience sur la CIAM est OBLIGATOIRE Notre client recherche un développeur autonome pouvant jouer le rôle de backup pour le tech lead Tech : archi mircroservice, Java 21, Spring Boot 3, CIAM (Consumer identity acces management), Kafka, ELK, Tomcat, Reverse Proxy, LDAP. Couchbase en BDD, Jquery HTML/CSS pour le front, Démarrage : ASAP Mission Longue Expérience : 7-10ans Télétravail : FULL TT

Principales missions Le consultant participera au développement d’une plateforme IoT utilisant les technologies (Kubernetes, Kafka, Microservices). Participation aux cérémonies Agile (Daily, Sprint Planning) Conception et implémentation de services en fonction des besoins Participation aux revues de code Documentation et maintien des solutions techniques Résolution des problèmes système Mesure des performances des systèmes mis à jour ou installés Compétences requises Solides connaissances en langages de programmation et en design patterns Capacités avancées de résolution de problèmes Communication efficace en anglais dans un environnement multiculturel Expérience attendue Minimum 7 ans en développement backend Expérience DevOps appréciée Environnement technique Back-end : Java, Spring Boot, Kafka, Web services (SOAP, REST), Hibernate Front-end (un atout) : ReactJS, CSS, JavaScript Outils CI/CD : Git, Gitlab CI, Maven Bases de données : Cassandra, PostgreSQL

3 jours de présentiel par semaine (lundi, mardi et jeudi) Stack : .NET / React , Kafka + MongoDB + SQL Architecture en microservices 4-5 ans d’XP minimum Démarrage : décembre 2024 Les missions s'axeront autour des points suivants : • Développer, tester et maintenir les composants techniques associés aux produits de l'équipe • Concevoir des architectures performantes et de qualité pour répondre aux besoins d'évolution du produit • Participer à la garantie de la stabilité, la performance et l'évolutivité de votre périmètre • En mesure d'évoluer au sein d’une équipe • Autonome, et force de proposition Les informations : Mission plus orientée back : 70% back / 30% Front Mission longue : 6 mois minimum (bon de commande de 3 mois renouvelables)

Nous recherchons pour notre client dans le domaine de la santé, un développeur senior back-end sur .Net. Le profil interviendra sur un projet de plateforme de gestion des données orientées imagerie scientifique. La plateforme est en .Net/Angular principalement dans un environnement Devops (Docker/K8s, Helm) en utilisant également Kafka, et C++/Python sur certains services pour des questions de performances. Le projet est en agilité (Scrum/SAFe). Compétences : un profil davantage dans l’ingénierie logicielle / architecture que dans le développement - Bonne communication très importante - Anglais courant obligatoire (fluente)

La mission comporte deux casquettes et les deux sont également importantes et font partie du périmètre de rôle : - Une partie Architecte Big Data qui nécessite de discuter avec les clients pour comprendre leurs enjeux et proposer un sizing de la plateforme, ainsi que les accompagner dans les bonnes pratiques de développement et de livraison. - Une partie Exploitation de production qui nécessite des opérations obligatoires de patching, mise à jour de mot de passe et certificats, certificats création des nouveaux utilisateurs et policies associées, etc. Dans ce contexte, la prestation consiste à : - Maintenir l’architecture Big Data en utilisant les dernières technologies ad-hoc - Participer à l’industrialisation, au déploiement, au maintien des clusters Cloudera existants (Cloudera Manager, HDFS, Yarn, Hive, Ranger, Nifi, Kerberos) - Mettre en place les nouveaux outils que notre SI souhaite explorer: Kafka, Iceberg, Impala … - Participer à l’exploitation quotidienne des plateformes (vérifier la santé des clusters, mettre à jours mensuellement les serveurs) - Gérer la sécurité et l’accès aux clusters - Monitorer les plateformes et communiquer sur les besoins futurs - Apporter un support technique aux équipes de développement (Data Engineers / Data Scientists) - Mener les réflexions sur les évolutions à apporter aux plateformes

Notre client, Banque de Finance et d'Investissement, recherche un Développeur FullStack confirmé (H/F) dans le cadre d'une longue mission. Contribuer au développement d'une application interne de prise de décision pour le routage de messages dans le cadre du projet SWIFT CBPR+, en méthodologie AGILE. - Développer des fonctionnalités Back-End en JavaEE, SpringBoot, et API Rest. - Concevoir et intégrer des interfaces utilisateur avec Angular, TypeScript, et HTML/CSS. - Assurer la gestion des bases de données via PostgreSQL. - Mettre en place et maintenir des pipelines CI/CD avec Git, Maven, et NodeJS. - Travailler sur l’infrastructure containerisée (Kubernetes) et gérer des services cloud (S3). - Configurer des outils de monitoring et de logs (ELK, Kafka). - Participer aux cérémonies AGILE et collaborer avec des équipes pluridisciplinaires. Livrables : - Application fonctionnelle pour le routage de messages. - Documentation technique et guides utilisateur. - Scripts et configurations pour les environnements de développement et de production.