Trouvez votre prochaine offre d’emploi ou de mission freelance Apache Kafka

💼 Poste : Bigdata Engineer Cloud 🏭 Secteurs stratégiques : Banque d’investissement 📍Localisation : Ile de France 🗓 Démarrage : ASAP Expérience souhaité : 0 - 3 ans Principales missions sont : Création et maintenance des architectures Big Data pour les besoins interne de l’entreprise. • interaction avec REST APIs • Kafka • gestion des jobs et administration Ansible • Technologies Confluence /JIRA pour la gestion documentaire, Git /Bitbucket Création et maintenance des architectures Big Data pour les besoins interne de l’entreprise. • interaction avec REST APIs • Kafka • gestion des jobs et administration Ansible • Technologies Confluence /JIRA pour la gestion documentaire, Git /Bitbucket

Contexte et Mission : Notre client cherche à renforcer son équipe, avec des projets ambitieux pour 2025, cette équipe est au cœur des enjeux stratégiques de l'entreprise. Nous recherchons un Développeurs Full Stack orientés Front en remplacement, pour travailler sur des projets critiques et visibles à grande échelle. Le rôle inclut des missions variées, de la création d'interfaces performantes à l'interaction avec des API Rest, en passant par la gestion des builds et le support opérationnel (astreintes). Vous évoluerez au sein d’une équipe dynamique, composée de talents internes et externes, avec un fort accent sur la collaboration, la sécurité et la qualité du code.

Vos tâches toucheront en un premier temps au développement. L’équipe est composée de 2 développeurs. Vous aurez pour mission : - Le développement de nouvelles fonctionnalités - Maintenir la CI/CD sur GitLabCI - Maintenance de la plateforme sur le cloud (OVH, Kubernetes) - Gestion des machines et serveurs - Maintenance opérationnelle (gestion des montées de versions, maintenance technique, etc..) Vous devrez également : - Rédiger la doc de conception technique - Développer des Users Stories - Corriger des anomalies - Rédiger des tests unitaires - Déployer ses développements - Maintenir la CI/CD - Maintenir la plateforme de production - Mettre à jour ses tickets dans JIRA

Description du poste de développeur Web : Prendre en charge les développements Java : Assurer la conception, le développement et l’intégration des projets et solutions ainsi que les maintenances correctives et évolutives Contribuer à alimenter et affiner le contenu du backlog pour prévoir les développements futurs Préparer la mise en production Gérer et maintenir la documentation technique Assurer le diagnostic et la résolution des dysfonctionnements Contribuer à la résolution des blocages rencontrés par l’équipe.

Nous recherchons un développeur Big Data senior avec une expertise sur Cloudera, Spark et Apache Iceberg pour intervenir sur une mission de longue durée. Le but de la mission est de participer sur un projet de création d'un Datalake opensource dans un contexte de création d'outils liés à de l'intelligence artificielle. La prestation s'effectuera au sein des équipes d'une vingtaine de personnes(data engineering, data architects). Anglais: Bon niveau requis car une partie des équipes est en Amérique et en Inde. Le datalake s'appuie sur l'offre Cloudera on premise. Dans ce contexte, la prestation consiste à intervenir sur le POC (Proof of concept) en étroite collaboration avec l'administrateur du datalake house et à mettre en oeuvre et à valider l'infrastructure des plateformes de données. Dans ce cadre, le prestataire contribuera et aura la responsabilité des sujets suivants: -Conception et développements du POC avec Cloudera, NoSQL, Mifi, Apache Iceberg, Kafka... -Mise en œuvre des pipelines pour l'ingestion et l'intégration des données à partir des divers sources tout en s'assurant de la qualité et la cohérence des données. -Processus ETL / ELT -Développement et Optimisation des sources ETL et ELT pour soutenir les besoins en datawarehouse -Optimisation de la performance des flux de données et des requetes -Travail en étroite collaboration avec l'administrateur

Mission : En tant que Tech Lead Back-end, vous serez responsable de définir et de piloter l'innovation technique au sein de l'organisation. Vous réaliserez des audits pour identifier les axes d'amélioration, définirez des stratégies d'évolution pour optimiser le système d’information et anticiperez les besoins technologiques futurs. Vous serez également chargé d’encadrer les équipes de développement, d’implémenter des microservices et de garantir la mise en œuvre de design patterns pour des solutions performantes et scalables.

La prestation s'appuiera sur plusieurs projets en développement informatique, soit en complement/fiabilisation ou en nouveau développement de module : 1- Fiabilisation d'u outil interne: - Renforcement des structures de BDD - Reprise des scripts d'insertion des données en base - Fiabilisation des données et des IHMs 2- Reprise des développements d'un outil interne découpée en 2 lots (livrables) - Reprise des développements en attente (pages, fonctions…) - Développement de page de Dashboard des Automates - Développement de page dédiée a certains domaines - Développement d'une page permettant d'analyser les indisponibilités du réseau radio (historique d'ITR) 3- Industrialisation des déclenchements CDAI - Développement d'un système de déclenchements automatique des TT CLARIFY avec temporisations - Développement des pages d'administration des variables (Tempo, seuil, Arrêt d'urgence...) - Porter cette industrialisation sous SIGO 4- Industrialisation des enrichissements Alarme et Tickets - Développement d'un module pour enrichir les alarmes dans l'hyperviseur (type Outage) - Développement d'un module d'enrichissement des tickets d'incident (SIGO) pour: * Créer automatiquement des tickets en fonction des alertes météo * Positionner des informations (TAG) en fonction de donnée spécifique 5- Auto télé-inter (ATI) - Reprise des ATI existante - Développement d'un système pour tracer les ATI dans l'outils de ticketing (CLARIFY ou SIGO) - Développement d'un system d'orchestration (scenarii multiples avec association d'autres briques d'industrialisation type CDAI) - Mise en place de fonction de contrôle du système (KPI, Keep alive, gestion des erreurs)

💡 Contexte /Objectifs : L'équipe en charge les services de monitoring , d'alerting et de collect de log sur 3 plaques. Le bclient souhaite mettre en oeuvre plusieurs évolutions de son socle technique en termes d’ Urbanisme des systèmes d'information Dans ce cadre, la prestation consiste à contribuer à/au(x) :  La collecte de log  La mise en place du dispositif ELK pour les différentes requêtes liés à la collecte de log  La gestion d'une volumétrie grandissante, multiplication de sources d'alimentation (evolution/tuning de l'infra existante et maintien en condition)  La mise en place d'un monitoring plus fin avec utilisation de l'IA  La configuration de logstash pour des tâches de parsing et d'enrichissements.  La mise en oeuvre de WEC (Windows Event Collector) pour collecter certaines sources.  L'usage d'un bus Kafka est à l'analyse pour l'enrigissement des logs  Les outils : Suite Elastic (Agents xBeat, collecteurs logstash, Elasticsearch,pipeline ,WEC, Kibana) / Parsing / Shell, LINUX. Les livrables attendus sont :  La mise à jour de la documentation  La maintien en condition des outils  Le développement des outils d'expoitation  La gestion des tickets d'incidents  La gestion des requêtes

Le bénéficiaire souhaite une prestation d'architecture solutions techniques pour la nouvelles architecture des applications en 2025. Le but est la modernisation des applications, dans le respects des nouvelles normes en terme de sécurité. Schémas d'architectures logicielles Définir les patterns d'architecture et produire les schémas associés Proof of concepts Démonstrations Présentations PPT Comptes rendus réunions et décisions Anglais obligatoire SpringBoot, Kafka, APIGEE, CAMUNDA Télétravail partiel

Dans le cadre des projets d'évolution de notre banque, l'architecte applicatif a pour mission : d'accompagner opérationnellement les projets pour la définition de l’architecture applicative et défendre les choix opérés lors du passage en Comité d’Architecture et des différentes instances. Il est sollicité sur les nouveaux projets et sur les évolutions significatives des applications existantes (nouveaux flux, nouveaux composants, évolutions du périmètre fonctionnel initial…) • Participer activement à la phase de cadrage projet • Découpage en Services/Microservices • Proposer et accompagner les projets dans l’adoption des technologies de type Spark, Java, Kafka • Accompagner les équipes de développements pour l’application des règles et standards d’architecture. • Répondre aux exigences fonctionnelles et non fonctionnelles demandées dans le cadre de la mise en place de la solution. • Evaluer la pertinence et la cohérence des projets par rapport aux patterns d’architecture technique et aux systèmes existants (par des études d’opportunité, des POC, etc.) • Rédaction des dossiers d’architecture applicative et techniques • Gérer (construction, mise à jour et évolution) la cartographie technique du SI ou du sous-ensemble du SI dont il a la charge • Définir ou contribuer à la définition des patterns d’architecture technique à partir des services d’infrastructure mis à disposition par l’infogéreur du Groupe

Pour notre client dans le secteur privé, nous recherchons un ingénieur data lead expert. Environnement SAFe. Mission longue 3 jours de télétravail et 2 jours sur site Mardi et Vendredi. Expertise obligatoire : Tech Lead. Connaissance des APIs. Modélisation base de données (idéalement via Power Designer). Travail dans un environnement décisionnel. Kafka pour consommer de l'évènementiel. Java. Python : Language GO - SQL Datastage souhaitable ou un ETL. Missions : On recherche un ingénieur Data qui soit le Lead des développeurs de l'équipe avec la volonté de tirer l'équipe vers des nouvelles pratiques et technologies (Evènementiel, APIsation, scripts Python etc). Son expertise dans ces outils doit amener à des nouvelles pratiques. Il doit être proactif et capable d'aller échanger aves ses pairs d'autres équipes Data au sein de Bpifrance et doit être curieux des nouvelles pratiques et nouveaux outils de marché. La connaissance complémentaire de Datastage serait un vrai plus.

la prestation consiste à : Ø Maintenir l’architecture Big Data en utilisant les dernières technologies ad-hoc Ø Participer à l’industrialisation, au déploiement, au maintien des clusters Cloudera existants (Cloudera Manager, HDFS, Yarn, Hive, Ranger, Nifi, Kerberos) Ø Mettre en place les nouveaux outils que notre SI souhaite explorer: Kafka, Iceberg, Impala … Ø Participer à l’exploitation quotidienne des plateformes (vérifier la santé des clusters, mettre à jours mensuellement les serveurs) Ø Gérer la sécurité et l’accès aux clusters Ø Monitorer les plateformes et communiquer sur les besoins futurs Ø Apporter un support technique aux équipes de développement (Data Engineers / Data Scientists) Ø Mener les réflexions sur les évolutions à apporter aux plateformes

Prêt.e à révolutionner le monde de la technologie avec vos compétences en JAVA ? Passionné.e par le monde de l' IA ? Dans le cadre d'une mission chez l'un de nos clients, basé à Nantes, nous recherchons un Développeur JAVA Spring Boot Expérimenté (H/F) pour un démarrage rapide. Missions principales : * Dans un environnement de microservices orientés événements, concevoir et développer des applications en utilisant JAVA Spring Boot. * Intégrer des algorithmes d'IA pour optimiser l'extraction de données et améliorer les processus métiers. * Collaborer étroitement avec une équipe de 10 personnes, en apportant votre expertise technique pour conduire des projets de conception et développement.

Contexte de la Mission : L’objectif de la mission est de fournir une assistance experte pour le Maintien en Conditions Opérationnelles (MCO) des applications métier en point de vente, tout en améliorant les processus DevOps. Le prestataire jouera un rôle clé dans l’exploitation et l’industrialisation des applications basées sur des technologies Web. Environnement Technique et Compétences Recherchées : • Systèmes : Unix/Linux et Windows • Langages de scripting : Shell et Python • Systèmes conteneurisés : Docker, Kubernetes, Rancher • Outils de déploiement continu : Gitlab-CI, Jenkins • Architectures distribuées et middlewares : Tomcat, Zookeeper, Hazelcast, Nginx/Apache, Kafka • Bases de données : SQL (DB2, Oracle, PostgreSQL) et NoSQL (MongoDB) • Outils d’ordonnancement et d’observabilité : Control-M, Alerta, Prometheus, Grafana

N ous recherchons une personne possédant une appétence pour l'aspect fonctionnel du produit, ainsi qu'une forte culture technique particulièrement autour du développement de µservices en .Net Core Également, des connaissances Mongo DB, et Kafka seront appréciées Vos missions s'axeront autour des points suivants : • Développer, tester et maintenir les composants techniques associés aux produits de l'équipe • Concevoir des architectures performantes et de qualité pour répondre aux besoins d'évolution du produit • Participer à la garantie de la stabilité, la performance et l'évolutivité de votre périmètre Votre état d'esprit : • Doté d’un esprit Agile, avec une sensibilité produit • En mesure d'évoluer au sein d’une équipe • Autonome, et force de proposition Vos compétences techniques Obligatoires: Langage : .NET BDD : SQL server, SQL server appréciées: langage : REACT BDD : MongoDB Files de messagerie : kafka Présence obligatoire sur site : lundi, mardi, jeudi

🔎 Tu es constamment en veille technologique et les environnements applicatifs n'ont plus de secret pour toi ? Ce poste d’Expert Technique et Applicatif te permettra sans aucun doute de t’épanouir. ⬇️ 🚀 Ton challenge si tu l’acceptes : · Assurer la supervision des applications dans son périmètre. · Prendre en charge les incidents de niveau 3 et participer activement aux résolutions de crises applicatives (possibilité d'astreintes). · Former les équipes N2 pour leur permettre de traiter certains incidents. · Préparer et sécuriser les mises en production majeures en collaboration avec les équipes. · Participer aux choix techniques en garantissant leur exploitabilité et leur intégration durable. · Participer activement à l’amélioration continue des outils de supervision en formulant des recommandations techniques et en assurant leur suivi. · Contribuer aux tests de performance et de robustesse des applications