Trouvez votre prochaine offre d’emploi ou de mission freelance Logstash

Architecture, Optimisation, Installation, Déploiement, Configuration et Maintenance (Elastic, Logstash, Grafana, Prometheus, Ansible) Maintenir et améliorer la solution de monitoring (Suite ELK). Mettre en place des tableaux de bord en temps réel. Gérer et faire évoluer les solutions de gestion des logs (ELK, SIEM, ...). Surveiller les performances des systèmes applicatifs. Participer à l'implémentation des solutions informatiques. Assurer la continuité des flux inter-applicatifs et gérer les incidents. Effectuer des rapports réguliers sur les activités. Intégration et automatisation via playbooks Ansible. Expertise en observabilité (Grafana, Prometheus) et gestion des logs (ELK, Kafka, SIEM). Connaissance des outils d'automatisation (Ansible). Expérience avec la conteneurisation (Docker, Kubernetes). Intégration et Support applicatif.

Nous recherchons un Expert Elasticsearch et Observabilité pour rejoindre notre équipe. Vous serez chargé de concevoir, développer et déployer des solutions basées sur la plateforme Elasticsearch , tout en consolidant l’écosystème Elastic autour de cette solution. Vous interviendrez également sur l’industrialisation des opérations de run et accompagnerez nos clients dans la résolution de problématiques liées à l’observabilité et à la gestion des données. Vous évoluerez dans un environnement technique de grande envergure comprenant 4 plateformes Elastic Cloud Enterprise , avec : 2 000 instances Elasticsearch 700 instances Kibana 70 instances APM 600 instances Logstash Volumétrie gérée : 60 TB/s Interconnexion avec des plateformes de streaming, de virtualisation et d’orchestration de conteneurs. Conception de solutions Elastic : Analyser les besoins clients pour concevoir des solutions Elastic adaptées et performantes. Modéliser les données, optimiser les requêtes Elasticsearch, et assurer la gestion efficace des clusters. Développement de POC : Créer et tester des Proof of Concept (POC) pour démontrer la valeur ajoutée des solutions Elastic. Support avancé : Assister les équipes dans la résolution de problèmes complexes de données et les aider à améliorer l'observabilité. Industrialisation et automatisation : Mettre en place des processus automatisés pour l’infrastructure Elastic (Elasticsearch, Kibana, Logstash, Beats) afin d'améliorer la gestion des opérations de run. Mentorat et partage de connaissances : Apporter un soutien technique et un mentorat aux équipes sur les bonnes pratiques en DevOps et Site Reliability Engineering (SRE) .

Contexte de la mission : Nous recherchons un(e) Expert Big Data (ELK) pour une mission au sein d'une grande entité spécialisée dans la gestion d'infrastructures informatiques à l'échelle mondiale. Vous interviendrez dans un environnement dynamique et multi-régions (EMEA, AMER, ASIA) pour améliorer la gestion et l’optimisation des systèmes de monitoring , collecte de logs et alerting . Expertises et technologies requises : Suite Elastic : ELK (Elasticsearch, Logstash, Kibana), xBeat Agents. Systèmes : Shell, Linux. Technologies complémentaires : Kafka, Windows Event Collector (WEC), IA pour le monitoring. Environnement : Vous serez en charge de maintenir et d'améliorer une infrastructure complexe dédiée à la collecte et au traitement des logs. Cela inclut la gestion de grandes volumétries de données provenant de plusieurs sources, et l’optimisation de l’architecture ELK pour répondre à des besoins de performance croissants. Vous utiliserez des outils avancés de monitoring et de machine learning pour affiner l'analyse des logs et anticiper les incidents. Ce poste est destiné à un(e) professionnel(le) ayant une solide expertise en gestion des infrastructures de logs , avec des compétences avancées dans l'utilisation de la suite Elastic et des systèmes Linux , dans un environnement à forte volumétrie et multi-sources.

Consultant ELK Compétences Requises - Expérience : Minimum 3 ans d'expérience avec Elasticsearch, Logstash et Kibana. - Connaissances Techniques : Maîtrise des concepts d’ingestion, de transformation et de visualisation des données. Solides compétences en administration de systèmes Linux. - Machine Learning : Expérience dans l'utilisation des fonctionnalités de Machine Learning d'Elasticsearch. - Scripting: Compétence en scripting (Python, Bash, etc.) pour automatiser les tâches.Poste de responsable de la mise en place, de la configuration et de l'optimisation de la stack ELK pour monitorer les serveurs, applications et bases de données du client, avec une intégration fluide avec ServiceNow. Les tâches demandées sont : Déploiement de la Stack ELK** : Installer, configurer et maintenir Elasticsearch, Logstash et Kibana. - Architecture: Concevoir et mettre en place l’architecture de la stack ELK adaptée à nos besoins spécifiques en matière de gestion de systèmes. - Configuration et Optimisation : Configurer les pipelines de données, optimiser les performances et assurer la scalabilité de la solution. - Observabilité : Mettre en place des solutions d'observabilité pour surveiller les performances et la santé des systèmes. - Interopérabilité avec ServiceNow : Intégrer ELK avec ServiceNow pour améliorer le suivi des incidents et la gestion des tâches. - Automatisation : Développer et mettre en œuvre des scripts et des outils pour automatiser les tâches répétitives et les processus de surveillance. - Machine Learning : Utiliser les fonctionnalités de Machine Learning disponibles dans ELK pour détecter des anomalies et générer des alertes pertinentes. - Documentation : Rédiger et maintenir la documentation des configurations et des processus. - Support : Assurer le support technique et la résolution des problèmes liés à la stack ELK. Compétences Requises - Expérience : Minimum 3 ans d'expérience avec Elasticsearch, Logstash et Kibana. - Connaissances Techniques : Maîtrise des concepts d’ingestion, de transformation et de visualisation des données. Solides compétences en administration de systèmes Linux. - Machine Learning : Expérience dans l'utilisation des fonctionnalités de Machine Learning d'Elasticsearch. - Scripting: Compétence en scripting (Python, Bash, etc.) pour automatiser les tâches. - Automation : Expérience avec des outils d'automatisation (Ansible, Puppet, Chef, etc.) pour automatiser la gestion et la surveillance de l'infrastructure. - Monitoring et Observabilité : Expérience dans la surveillance et la gestion de l'infrastructure IT avec un accent sur l'observabilité. - Interopérabilité : Expérience dans l'intégration d'ELK avec ServiceNow ou des systèmes similaires. - Communication : Excellentes compétences en communication écrite et orale. Capacité à travailler en équipe et à partager ses connaissances. - Résolution de Problèmes : Capacité à diagnostiquer et résoudre des problèmes complexes de manière efficace et autonome.

1 - Contexte et objectifs de la prestation Le département Operations est en charge de la gestion au sens ITIL de la production informatique. L'entité a en charge les services de monitoring , d'alerting et de collect de log sur les 3 plaques EMEA, AMER et ASIA. Le Bénéficiaire souhaite améliorer la qualité de la gestion de ses systèmes informatiques. A ce titre, le Bénéficiaire souhaite bénéficier de l’expertise du Prestataire en termes d’Urbanisme des systèmes d'information Dans ce cadre, la Prestation consiste à contribuer à/au(x) : • La collecte de log de l'entité MOS • La mise en place du dispositif ELK pour les différentes requêtes liées à la collecte de log • La gestion d'une volumétrie grandissante, multiplication de sources d'alimentation (evolution/tuning de l'infra existante et maintien en condition) • La mise en place d'un monitoring plus fin avec utilisation de l'IA • La configuration de logstash pour des tâches de parsing et d'enrichissements. • La mise en oeuvre de WEC (Windows Event Collector) pour collecter certaines sources. • L'usage d'un bus Kafka est à l'analyse pour l'enrigissement des logs • Les outils : Suite Elastic (Agents xBeat, collecteurs logstash, Elasticsearch,pipeline ,WEC, Kibana) / Parsing / Shell, LINUX. 2 - Livrables attendus Les livrables attendus sont : • La mise à jour de la documentation • La maintien en condition des outils • Le développement des outils d'expoitation • La gestion des tickets d'incidents • La gestion des requêtes

!!!! Postuler que si vous avez déjà travaillé sur JAVA/ANGULAR ET UNE MIGRATION ELK!!!! PAS DE SOUS-TRAIT TJM 580EUR Kaibee recherche un Développeur Java/Angular expérimenté pour intervenir chez notre client, un acteur majeur du secteur des médias . Si vous avez une expertise dans les projets de migration vers ELK (ElasticSearch, Logstash, Kibana) et une première expérience avec AWS , nous vous invitons à rejoindre cette mission passionnante ! En tant que Développeur Java/Angular, vous aurez un rôle clé dans la conception, le développement et la migration de solutions techniques de pointe. Vous serez responsable de : Développer et maintenir des applications web robustes et performantes en Java et Angular , adaptées aux besoins de notre client dans les médias. Participer à la migration de l'infrastructure technique vers des solutions ELK , en intégrant les dernières technologies de gestion de données et de logs. Contribuer à l'architecture cloud en collaborant sur l'intégration et l'optimisation d'applications sur AWS . Travailler en étroite collaboration avec les équipes produits et métiers pour comprendre les besoins fonctionnels et y répondre de manière agile. Participer aux phases de tests et d'assurance qualité pour garantir des livrables de haut niveau. Assurer le support technique , l'amélioration continue et la mise à jour des systèmes existants.

Notre client, concepteur et réalisateur de solutions clés en main, cherche à renforcer ses équipes avec un Data Architect pour intervenir dans la mise en place d’une plateforme Data / de valorisation de la donnée. Cette plateforme s’intègre dans le cadre d’un SI de 25 personnes, organisé en plusieurs équipes Scrum. Les missions principales seront : Gérer la définition, la consolidation et le développement d’une plateforme de valorisation de la donnée En charge de la définition, du dimensionnement, de la sécurité et du maintien de l’architecture de la plateforme Gouvernance de la donnée Définition de l’architecture et de la sécurité de la plateforme Benchmark d’outils et Intégration au sein de la plateforme Consolidation du système d’authentification Maintien des documentations techniques Maintien en condition de sécurité des outils de la plateforme Stratégie de backup Travail en collaboration avec l’équipe d'exploitation (externe) et l’équipe projet (interne) Le contexte technique : - Stockage : Hadoop, Hive, Hbase, Postgresql, Ceph - Calcul distribué : Spark - Prototypage : Jupyter, Dataiku, Hue, Airflow - Les outils d’alimentation : Kafka, Nifi - Affichage : Grafana, Tableau - Administration : Kerberos, Zookeeper, Solr, Ranger, Atlas, Ldap - Les outils de proxyfication : Knox, HAProxy - Les outils de supervision: Elasticsearch, Logstash, Kibana, Prometheus

Smarteo recherche pour l'un de ses clients, Un Consultant pour la mise en place / configuration / l'optimisation de la stack ELK sur IDF Description: Poste de responsable de la mise en place, de la configuration et de l'optimisation de la stack ELK pour monitorer nos serveurs, applications et bases de données, avec une intégration fluide avec ServiceNow. Déploiement de la Stack ELK: Installer, configurer et maintenir Elasticsearch, Logstash et Kibana. - Architecture : Concevoir et mettre en place l'architecture de la stack ELK adaptée à nos besoins spécifiques en matière de gestion de systèmes. - Configuration et Optimisation : Configurer les pipelines de données, optimiser les performances et assurer la scalabilité de la solution. - Observabilité : Mettre en place des solutions d'observabilité pour surveiller les performances et la santé des systèmes. - Interopérabilité avec ServiceNow : Intégrer ELK avec ServiceNow pour améliorer le suivi des incidents et la gestion des tâches. - Automatisation: Développer et mettre en œuvre des scripts et des outils pour automatiser les tâches répétitives et les processus de surveillance. - Machine Learning : Utiliser les fonctionnalités de Machine Learning disponibles dans ELK pour détecter des anomalies et générer des alertes pertinentes. - Documentation : Rédiger et maintenir la documentation des configurations et des processus. - Support : Assurer le support technique et la résolution des problèmes liés à la stack ELK. Compétences Requises : - Expérience : Minimum 3 ans d'expérience avec Elasticsearch, Logstash et Kibana. - Connaissances Techniques : Maîtrise des concepts d'ingestion, de transformation et de visualisation des données. Solides compétences en administration de systèmes Linux. - Machine Learning : Expérience dans l'utilisation des fonctionnalités de Machine Learning d'Elasticsearch. - Scripting : Compétence en scripting (Python, Bash, etc.) pour automatiser les tâches. - Automation : Expérience avec des outils d'automatisation (Ansible, Puppet, Chef, etc.) pour automatiser la gestion et la surveillance de l'infrastructure. - Monitoring et Observabilité : Expérience dans la surveillance et la gestion de l'infrastructure IT avec un accent sur l'observabilité. - Interopérabilité : Expérience dans l'intégration d'ELK avec ServiceNow ou des systèmes similaires. - Communication : Excellentes compétences en communication écrite et orale. Capacité à travailler en équipe et à partager ses connaissances. - Résolution de Problèmes : Capacité à diagnostiquer et résoudre des problèmes complexes de manière efficace et autonome. Qualifications et expériences : - Connaissance d'autres outils de monitoring et de gestion des logs (Prometheus, Grafana, etc.) - Certification Elastic - Expérience avec des bases de données NoSQL et SQL - Connaissance des pratiques DevOps et des outils CI/CD - Expérience avec ServiceNow et son écosystème Si vous êtes intéressé, transmettez moi votre TJM et votre CV

Gérer et optimiser les environnements de production en assurant leur disponibilité, leur performance et leur évolutivité (Windows et Linux). Mettre en place des solutions de monitoring robustes pour surveiller les performances et la santé des systèmes et des applications. Utiliser des outils tels que Nagios, Zabbix, Dynatrace et Grafana pour surveiller et analyser les métriques et les indicateurs de performance. Gérer les logs et les performances opérationnelles à l'aide d'outils comme Splunk, ELK (Elasticsearch, Logstash, Kibana). Collaborer avec les équipes de développement pour résoudre les problèmes liés à l'infrastructure et améliorer les performances des applications. Apporter des contributions significatives à l'automatisation des processus et à l'orchestration des conteneurs avec Kubernetes et Openshift.

Contexte: Contribution à l'évolution, au design, au run et à l'automatisation de la production Openstack et Kubernetes pour toutes les populations IT, dans tous les clouds utilisés par la banque. Des compétences sur les technologies suivantes sont requises: Linux RedHat / Ubuntu, CEPH, KVM, iscsi, iptables, ansible, python, logstash, ELK, Kubernetes, Prometheus, CSI, CNI, Docker,... Mission: Dans ce cadre, la mission consiste à : - Développe les produits OPENSTACK/Kubernetes dans les clouds utilisés par le client - Migration du workload Vmware vers openstack - Mise en place et maintien des plateformes citées - Développement et maintien des solutions de monitoring, d'automatisation et de reporting. - Propose et mise en place des nouvelles architectures techniques - Assurance du support et résolution d'incidents - Contribution à la documentation fonctionnelle et technique de l'entité. Automatisation de toutes les assistances L1/L2 ainsi que tout le catalogue de services