Trouvez votre prochaine offre d’emploi ou de mission freelance HDFS (Hadoop Distributed File System) à Paris

En tant que Lead Tech Data Studio & MLOps Senior, vous serez responsable du cadrage et de la mise en place d'une solution de Data Studio, destinée à servir plusieurs équipes via une offre mutualisée. Vous piloterez les travaux techniques depuis le cadrage initial jusqu'au déploiement, en supervisant également la migration des usages vers cette nouvelle solution. Vos principales missions incluront : Conception et mise en œuvre : Identifier les normes, patterns, et architectures nécessaires pour une utilisation optimale du Data Studio. Évaluation des solutions existantes : Analyser les capacités et limites de la solution Big Data en place, et proposer des alternatives, notamment autour de Kubernetes et du stockage S3. Documentation technique : Élaborer une documentation claire et détaillée sur les choix d'architecture et les processus de mise en œuvre. Supervision d'équipe : Encadrer les équipes techniques, définir des objectifs, et accompagner leur montée en compétence. Implémentation de pipelines : Diriger le développement et la mise en œuvre des pipelines nécessaires au fonctionnement du Data Studio. Adoption de nouvelles technologies : Évaluer et intégrer des technologies innovantes pour renforcer les processus MLOps et améliorer l'efficacité globale. Conformité et stratégie : S'assurer de la conformité des solutions par rapport aux objectifs stratégiques tout en maintenant un équilibre pragmatique. Vous jouerez un rôle clé dans la définition de l'architecture cible en collaboration avec les architectes et parties prenantes, tout en facilitant les prises de décision sur les solutions applicatives.

Je suis à la recherche pour un de nos clients d'un Expert Hadoop. Stack technologique : Distribution Hadoop : HDFS, YARN, Cloudera Manager, Hive, Hue, Impala, Spark, Zeppelin, Ranger, Knox, SQL, Zookeeper, ... Langages de scripting et de développement : Shell, Python, Spark Moteur de requetage : SQL, Hive, Impala, Système d'exploitation : Linux Le SI « BigData / Hadoop » a pour objectif de centraliser différentes sources de données hétérogènes sur un même socle technique pour manipuler de gros volumes de données, permettre de réaliser du requêtage croisé entre différentes sources de données hétérogènes et fonctionnellement pouvoir répondre à différents cas d’usages tels que : • Pour les équipes « DSI Etudes » : - Dans le cadre de phases d’études amont être en capacité d’explorer, croiser et analyser des données provenant de différents contextes, afin de formaliser des points structurants relatifs à la gestion des informations. - Dans le cadre de phases de spécifications savoir adapter la solution aux enjeux de volumétrie d’un cas d’usage ; • Pour les équipes « DSI Supports Fonctionnels » : Participer au suivi de Production pour explorer, croiser analyser les données inter-applications dans le but de piloter les opérations d’exploitation et être en mesure d’adresser aux éditeurs des demandes d’intervention pertinentes. • Pour les équipes « DSI Centre National de Recette et d’Intégration » : Préparer les jeux de données en explorant et en identifiant les données des applications qui constitueront les jeux d’essais en lien avec les critères métiers. • Pour les équipes « DSI Système d’Information Décisionnel », envisager une bascule vers Hadoop d’une partie des données stockées dans Teradata, dans l’objectif de réduire l’impact Teradata.

Expérience requise : 7 ans minimum Lieu de mission : Paris, métro Bourse (2 jours de télétravail) - Déplacements possibles sur site à Noisiel Date de démarrage souhaitée : Janvier 2025 Durée de la mission : 1 an, reconductible deux fois par période d'un an (651 jours) Entretien : Prévu en présentiel Le Service de SUPport TEChnique (SUPTEC) fait partie de la Direction de l’Informatique et des Télécommunications (DIT). Sa mission principale est d’assurer le fonctionnement d’un système d’information fiable et performant, de la validation des dossiers d’architecture à la mise en production et l’exploitation des applications. SUPTEC veille également à la cohérence et au respect des normes, procédures et outils utilisés par les lignes de production MVS, Windows et Unix pour l’intégration des applications. La section Intégrations accompagne les projets sur la partie packaging et automatisation des déploiements des livrables applicatifs, principalement à l’aide des outils Puppet et XLDeploy. Dans le cadre de la migration d'une plateforme, notre client recherche un Expert Hadoop pour l'installation d'une nouvelle version de Hadoop. Maintenir en conditions opérationnelles les environnements en collaboration avec les équipes N3. Traiter les incidents d’exploitation sur tous les environnements (production, intégration et qualification) : analyse, diagnostic (identification de la cause racine) et mise en œuvre de solutions. Assister les clients de la dataplatform dans l’optimisation de leurs traitements/requêtes. Effectuer des astreintes 2 nuits par mois, réparties au sein de l'équipe support. Automatiser l’infrastructure BigData et les actions récurrentes via Ansible. Implémenter les recommandations des équipes N3/Cloudera. Participer aux déploiements de clusters. Produire de la documentation sous Confluence, Git et Jira, en détaillant les résolutions d’incidents. Participer aux rituels SCRUM (System Demo, lancement de sprint, PI planning, rétrospective) avec les équipes de la Dataplatform. Bonne connaissance de RHEL 8 ou supérieur. Connaissance de PostgreSQL. Connaissance d’AUTOSYS 11 ou supérieur. Connaissance d’Ansible Tower/AWX. Connaissance d’Openshift. Compétences en scripting Shell. Maîtrise du langage Ansible 2.9 ou supérieur. Bonne connaissance de Hadoop (CDP 7.1). Connaissance d’OpenSearch/Elastic Search. Connaissance de Git. Expertise en Infra Ops. Connaissance des principes du Datalake. Disponibilité pour des astreintes (2 par mois)

💡 Contexte /Objectifs : Dans ce cadre, la prestation consiste à contribuer à/au(x) : La production et au monitoring de la roadmap d'architecture du Socle Big data sur ses composantes on prem (écosystème autour de la distribution Cloudera Data Platform) et on cloud (Microsoft Azure /Power BI / AWS). La mise en place et aux validations des normes et standards techniques, applicatives & fonctionnelles (portée groupe). La validation de l'architecture des moyens produites par le Socle. Monitoring du bon usage des offres de service du socle par l'échange avec le management d'architecture des entités. Livrables : Les livrables attendus sont : Etudes d'architecture technique autour du big data, particulièrement sur les sujets liés à la mise en place de capacités data sur Microsoft Azure, Hadoop on prem et AWS, ainsi que sur les questions d'intéropérabilité Contribution à la roadmap long terme (PLan de Transformation Stratégique) Assistance aux product owner dans la mise en œuvre des offres service

Organisme bancaire de premier plan en France. ontexte : Le Service de SUPport TEChnique (SUPTEC) est l’une des huit entités de la Direction de L’Informatique et des Télécommunication (DIT). Sa mission principale est d’assurer le fonctionnement d’un SI fiable et performant. Son action s’exerce de la validation des dossiers d’architecture jusqu’à la mise en production et l’exploitation des applications. SUPTEC a également pour mission de veiller à la cohérence et au respect des normes, des procédures et des outils mis en oeuvre par les lignes de production MVS, Windows et Unix pour l’intégration des applications. La section Intégrations a notamment pour mission l’accompagnement des projets sur la partie packaging et automatisation des déploiements des livrables applicatifs. La section s’appuie principalement sur les outils Puppet et XLDeploy pour gérer ces automatisations. Objet : Dans le cadre d'une migration d'une plateforme , la Banque de France recherche un Expert Hadoop en renfort pour l'installation d'une récente version Hadoop Descriptif mission : ? Assurer le maintien en conditions opérationnelles des environnements en collaboration avec les N3 ? Traitement des incidents d’exploitation sur tous les environnements (production, Intégration et Qualif) : analyse, diagnostic (mise en exergue de la root cause) et implémentation de solutions ? Assistance aux clients de la dataplatform dans leur optimisation de traitements / requêtes ? Astreintes 2 nuits par mois déclenchées sur incident, à se répartir sur l'équipe support ? Automatisation de l’infrastructure BigData / actions récurrentes via ANSIBLE ? Implémentation des recommandations N3/cloudera ? Participer aux déploiements de cluster ? Produire de la documentation sous Confluence, Git mais aussi Jira en renseignant les détails des résolution d’incidents ? Agilité à l'échelle sur toutes les équipes de la Dataplatform, participation aux rituels SCRUM (System Demo/Lancement de sprint/PI planning/Rétrospective)

Contexte et objectifs de la prestation Le service réalise le développement de l'ensemble des services BIGDATA , et garantit : - L’exploitabilité des présentations mises en œuvre - L'expertise des ensembles applicatifs - Le planning global de production - Le support au pilotage. Le Bénéficiaire souhaite améliorer la qualité de la gestion de ses systèmes informatiques. A ce titre, le Bénéficiaire souhaite bénéficier de l'expertise du Prestataire en termes d’ Architecture technique. Dans ce cadre, la Prestation consiste à contribuer à/au(x) : - L’automatisation basée sur Cloudera CDP 7.1 à base d’Ansible et Terraform dans un contexte hybride cloud interne et serveurs physiques - Maintien de la production - La gestion des nouvelles demandes de nos bénéficiaires - Livraisons des projets qui apportent de la valeur à nos bénéficiaires - L’automatisation de l'administration et des demandes (self-service, API, scripts) - La mise en place des tests de nouveaux composants

PROPULSE IT recherche pour un de ses clients un Ingenieur Système / Administrateur Senior (+10 ans d'exp) : Administration Infrastructure ▪ Gérer le parc des (60) serveurs industriels, bureautiques et logiciels ▪ Exploiter et maintenir en condition opérationnelle et de sécurité les infrastructures hébergeant les applications locales, IaaS, etc. ▪ Réaliser l'installation, le paramétrage et l'assistance utilisateur des logiciels métiers et industriels ▪ Mettre en œuvre les outils garantissant la disponibilité, l'intégrité et la confidentialité des données dans le respect des engagements de service ▪ Gérer les droits d'accès aux systèmes et aux applications en fonction des profils ▪ Assurer le dépannage sur les infrastructures locales y compris la traçabilité des interventions ▪ Produire la documentation des infrastructures systèmes, bases de données, applications et ressources ▪ Contribuer à la mise à jour de la cartographie des SI et logiciels ▪ Assister et conseiller les utilisateurs, pour le périmètre hors service client de la DSI ▪ Réalise le projet de portage technique et les travaux d'infrastructure (projet remédiation IaaS) ; Projets SI industriel transverses ▪ Contribuer aux projets sous le pilotage de la DSI. A titre d'exemple : migration Windows ▪ Contribuer aux projets industriels. A titre d'exemple : installation de serveurs pour les automates en atelier, gestion des connexions pour les équipements industriels, projet BIM, etc. Les livrables attendus tout au long de la mission sont les suivants : ▪ Documentation des infrastructures systèmes, bases de données, applications et ressources ; ▪ Les comptes-rendus de réunions ; ▪ La stratégie de recette et de migration technique ; ▪ Le plan d'action et de suivi des projets.

ADMINISTRATEUR SYSTEMES WINDOWS SERVER ET SYSOPS - AUTOMATISATION ANSIBLE / AWX Contrainte forte du projet : Contexte Industriel Les livrables sont - Rédaction de document projet (dossier exploitation, procédures,...) - DÉveloppement Pipeline de déploiement patch/antivirus/supervision opérationnel - Plan de mise à jour des serveurs / Mise à jour de l'intranet technique (XWiki) - Automatiser le déploiement de l'antivirus via Ansible / AWX - Automatiser le patchage récurrent via WSUS - Gérer les serveurs Windows des sites et des serveurs centraux - Travailler en coordination avec l'équipe SI Industriel et les équipes d'exploitation - Mettre en place les plans de patchage en fonction des contraintes des sites de distribution - Prévoir quelques déplacements en Ile-de-France sur les sites pour des points avec les équipes du SI Industriel - Participer ou prendre en charge la résolution d'incident de production Rédiger et mettre à jour des procédures et consignes d'exploitation ou de la documentation Niveau d'étude désiré Ingénieur Administrateur d'outils / de systèmes / de réseaux - Expert Expérience supérieure à 7 ans

Propulse IT recherche un Expert technique systeme Linux pour intégrer une équipe en charge de la conception, de la mise en oeuvre et du support des infrastructures Linux. Cette équipe souhaite renforcer et élargir son éventail de compétences en avec une prestation d'expert technique spécialisé dans les technologies RedHat Linux. Cette prestation aura pour mission d'assurer un support de niveau N2/N3 sur cette plateforme. Nous cherchons également à intégrer des compétences DevOps, notamment dans les technologies d'orchestration et d'automatisation, afin de soutenir nos équipes et nos projets en cours. L'un des projets techniques auxquels le prestataire devra contribuer est l'automatisation et l'industrialisation du processus de déploiement, visant à aligner nos environnements applicatifs sur les normes en vigueur et à adopter une approche similaire au Cloud pour le déploiement sur site. Dans ce contexte, nous attendons du prestataire qu'il nous aide a monter en compétence et participe à la conception des images Packer nécessaires ainsi que les Playbooks Ansible associés. Prestations : - Assurer le support N2/N3 des infrastructures, des paliers OS et des middlewares actuellement utilisés auprès des équipes de la production - Force de proposition dans le cas ou des actions de support sont automatisables - Participer aux projets techniques sur des environnements Linux (mise en œuvre de nouveaux paliers OS, middlewares et des évolutions d'infrastructures existantes)

💼 Poste : Tech Lead Java Spark référence 🏭 Secteurs stratégiques : Banque d’investissement 🗓 Démarrage : ASAP 💡 Contexte /Objectifs : Notre client souhaite mettre en œuvre le volet transformation du système d'information du programme d'amélioration du dispositif de pilotage et de certification de l'assiette risques structurels dont les objectifs sont : Amélioration et accélération de la constitution de l'assiette risques structurels La certification de cette assiette risques structurels cohérente comptable Renforcer la remédiation en termes de qualité de donnée et réduire le nombre d'ajustements manuels Notre client souhaite mettre en œuvre plusieurs évolutions de son socle technique. A ce titre notre client souhaite bénéficier de l'expertise du Prestataire en termes de conception et développement. Dans ce cadre, la prestation consiste à contribuer à/au(x): L’instruction et le cadrage technique des projets, L’implémentation de solutions techniques en méthodologie agile Environnement technique : Java (Spark est un gros plus, Python est un plus) Devops : Ansible, Jenkins, GitHub Actions, Sonar, Artifactory Big Data & Cloud : Cloudera CDP, Apache stack (HDFS, Oozie, Yarn) Data : Oracle DB, PostgreSQL, Hive, Elastic Search, REST APIs Livrables attendus Les livrables attendus sont : Notes de cadrage techniques Spécifications techniques Support et développement sur toutes les releases 2024-2025 🤝 Expertises spécifiques : Agile Scrum Ansible Artifactory Compétences en développement (Shell unix, Perl, PHP, Python, git, github) Elastic Search & Kibana Hive Java Jenkins Oracle Database Enterprise Server PostGreSQL REST Scripting (GuitHub, Ansible, AWX, shell, vba) Sonar

PROPULSE IT recherche un Ingénieur Systeme Senior - Intégration en production des applications exploitées. Les projets d'intégration concernent des nouvelles applications, des évolutions d'applications existantes ou des correctifs (patchs). - Mise à disposition des socles techniques de base : o Installation des serveurs (OS, briques techniques), pour les projets basés sur des applications (développement spécifique) ou des progiciels. o Accompagner la MOE à l'installation de la solution applicative, lui assurer une assistance technique selon la complexité des projets auxquels on a à faire face. - Configuration, paramétrage des briques techniques de manière optimisée pour un fonctionnement opérationnel. - Aide à l'installation de la solution logicielle sur les différents environnements. - Aide au débogage dans la configuration applicative des briques techniques ou logicielles. - Analyse de la manière dont on garantit un arrêt/démarrage cohérent de l'application. - Mise à disposition de scripts ad hoc pour répondre à des besoins particuliers en phase projet. - Qualification des applications : installation, packaging, contrôle de conformité aux normes d'exploitation et aux règles d'exploitabilité, tests techniques. - Mise en production : installation des applications packagées en production, paramétrage des outils d'exploitation (surveillance, sauvegarde, automatisation d'exploitation...). - Rédaction des dossiers d'exploitation et d'installation, préparation et installation des patchs applicatifs complexes, transfert de responsabilité à l'exploitant sur les applications intégrées. - Déploiement serveur / Brique techniques / application via usines logicielles.

Nous recherchons en urgence un(e) Administrateur avec la double compétence Windows / Linux (CentOS / Redhat) Contrainte forte du projet : Contexte Industriel avec sites distants Les livrables sont : - Rédaction de document projet (dossier exploitation, procédures,...) - Développement Pipeline de déploiement patch/antivirus/supervision opérationnel - Plan de mise à jour des serveurs - Mise à jour de l'intranet technique Description détaillée : - Automatiser le déploiement de l'antivirus via Ansible / AWX - Automatiser le patchage récurrent via WSUS - Gérer les serveurs Windows des sites distants et des serveurs centraux - Travailler en coordination avec l'équipe SI Industriel et les équipes d'exploitation - Mettre en place les plans de patchage en fonction des contraintes des sites - Prévoir quelques déplacements en Ile-de-France sur les sites pour des points avec les équipes locales - Participer ou prendre en charge la résolution d'incident de production - Rédiger et mettre à jour des procédures et consignes d'exploitation ou de la documentation Date de démarrage 08/07/2024

PROPULSE IT recherche un Expert technique système Linux Senior (+10 ans d'exp.) cette prestation d'expert technique spécialisé dans les technologies RedHat Linux aura pour principale mission d'assurer un support de niveau N2/N3 sur cette plateforme. Nous cherchons également à intégrer des compétences DevOps, notamment dans les technologies d'orchestration et d'automatisation, afin de soutenir les équipes et les projets en cours. L'un des projets techniques auxquels le prestataire devra contribuer est l'automatisation et l'industrialisation du processus de déploiement, visant à aligner nos environnements applicatifs sur les normes en vigueur et à adopter une approche similaire au Cloud pour le déploiement sur site. Dans ce contexte, nous attendons du prestataire qu'il nous aide a monter en compétence et participe à la conception des images Packer nécessaires ainsi que les Playbooks Ansible associés. Mission : - Asurer le support N2/N3 des infrastructures, des paliers OS et des middlewares actuellement utilisés auprès des équipes de la production. Force de proposition dans le cas ou des actions de support sont automatisables. - Participer aux projets techniques sur des environnements Linux (mise en œuvre de nouveaux paliers OS, middlewares et des évolutions d'infrastructures existantes)

Nous recherchons un Ingénieur Système et Réseaux expérimenté pour construire, développer et gérer l’infrastructure IT. Vous serez responsable de l'intégration et du suivi des projets techniques dans un environnement en constante évolution, garantissant une cohérence et une efficacité dans l’infrastructure des systèmes d'information. Missions : Ingénierie et intégration : Mise en œuvre de solutions techniques pour les systèmes, réseaux, postes de travail et middlewares. Assurer un rôle d'intermédiaire avec différents partenaires. Administration et évolution des équipements : Gestion de l’administration courante, rédaction de procédures et documentation. Automatisation des tâches d’administration et gestion de projets techniques. Support technique de niveau 3 et administration d'outils IT pour maintenir la performance du SI. Contrôle qualité et Support utilisateurs : Établissement et mise à jour des procédures techniques. Gestion du parc matériel et logiciel, et suivi de l’obsolescence. Contrôle de la qualité des services délivrés aux utilisateurs, garantissant la sécurité et la disponibilité des informations.

Ce poste nécessite des compétences fonctionnelle sur la partie OMS (Order Management System) et nécessite également les compétences d'un développeur très confirmé mais il n'y aura pas de développement à faire. La mission consiste à analyser et fouiller dans le code dans une fonction d'incidentologie afin de résoudre des tickets. la connaissance de Biztalk Server serait un vrai plus pour le poste. En qualité de support applicatif technique .NET, vous aurez pour mission de : • Catégoriser les incidents, • Analyser les incidents, • Communiquer les demandes de correction/évolution aux features teams, • Animer des échanges réguliers avec les features teams pour le suivi des incidents, • Identifier les incidents irritants et proposer des solutions, • Être en support sur un incident de production.

__________ Ingénieur d’étude et développement COBOL (expérimenté). Le Périmètre fonctionnel est varié, il y a plusieurs postes ouverts. Le client fonctionne en mode agile. - Conception technique - Développement en langage Cobol - Test et assistance à recette - Mise en production - Rédaction de la documentation applicative, du dossier de tests unitaires et du dossier de mise en production (DTA) __________ __________ __________ L'environnement technologique de la mission est le suivant : MVS, COBOL, JCL, DB2, SQL, CFT /MQ Series /IDZ