Offre d'emploi DATA ENGINEER APACHE/FLINK

Nous recherchons un(e) Ingénieur(e) Data/Expert(e) Apache Flink passionné(e) par le traitement de données en flux et par lots. Vous serez chargé(e) de contribuer au développement, à l’optimisation et à la maintenance d’applications Apache Flink, tout en collaborant étroitement avec des équipes multidisciplinaires.

Ce poste vous permettra de travailler sur des projets stratégiques liés au traitement des données, en garantissant des performances élevées, une grande évolutivité et une fiabilité optimale des applications Flink en production.

1. Développer et déployer des applications Apache Flink pour le traitement par lots et en flux.

2. Assurer la maintenance des pipelines Flink en production et optimiser leurs performances.

3. Déployer et configurer un cluster Flink prêt pour la production, optimisé pour l’évolutivité et la tolérance aux pannes.

4. Mettre en place et configurer des outils de surveillance et d’alertes (ex. : Prometheus, Grafana).

5. Identifier et résoudre les problèmes liés aux performances et aux échecs des tâches Flink.

6. Fournir une documentation détaillée (architecture, tuning, troubleshooting, meilleures pratiques).

7. Animer une session de transfert de connaissances avec les équipes internes.

1. Familiarité avec l’écosystème Big Data et les meilleures pratiques d’ingénierie des données.

2. Sens de la collaboration et capacité à transférer des connaissances à une équipe technique.

Profil recherché

• Expertise technique :

  • Maîtrise d’Apache Flink pour le traitement par lots et en flux.

  • Excellentes compétences en programmation : Java ou Scala, et SQL.

  • Bonne connaissance des technologies Big Data : Hadoop et Spark.

  • Expérience confirmée dans l'utilisation des services de données AWS.

• Expérience professionnelle :

  • Participation à des projets de production avec Apache Flink.

  • Démonstration de la capacité à optimiser des pipelines Flink pour des performances élevées.

Nous recherchons un(e) Ingénieur(e) Data/Expert(e) Apache Flink passionné(e) par le traitement de données en flux et par lots. Vous serez chargé(e) de contribuer au développement, à l’optimisation et à la maintenance d’applications Apache Flink, tout en collaborant étroitement avec des équipes multidisciplinaires.

Ce poste vous permettra de travailler sur des projets stratégiques liés au traitement des données, en garantissant des performances élevées, une grande évolutivité et une fiabilité optimale des applications Flink en production.

1. Développer et déployer des applications Apache Flink pour le traitement par lots et en flux.

2. Assurer la maintenance des pipelines Flink en production et optimiser leurs performances.

3. Déployer et configurer un cluster Flink prêt pour la production, optimisé pour l’évolutivité et la tolérance aux pannes.

4. Mettre en place et configurer des outils de surveillance et d’alertes (ex. : Prometheus, Grafana).

5. Identifier et résoudre les problèmes liés aux performances et aux échecs des tâches Flink.

6. Fournir une documentation détaillée (architecture, tuning, troubleshooting, meilleures pratiques).

7. Animer une session de transfert de connaissances avec les équipes internes.

1. Familiarité avec l’écosystème Big Data et les meilleures pratiques d’ingénierie des données.

2. Sens de la collaboration et capacité à transférer des connaissances à une équipe technique.

Profil recherché

• Expertise technique :

  • Maîtrise d’Apache Flink pour le traitement par lots et en flux.

  • Excellentes compétences en programmation : Java ou Scala, et SQL.

  • Bonne connaissance des technologies Big Data : Hadoop et Spark.

  • Expérience confirmée dans l'utilisation des services de données AWS.

• Expérience professionnelle :

  • Participation à des projets de production avec Apache Flink.

  • Démonstration de la capacité à optimiser des pipelines Flink pour des performances élevées.