Mission freelance Développeur Big Data Spark (H/F)

Basée à Lille, Lyon, Nantes, Grenoble et Bruxelles, Insitoo Freelances est une société du groupe Insitoo, spécialisée dans le placement et le sourcing des Freelances IT et Métier. Depuis 2007, Insitoo Freelances a su s’imposer comme une référence en matière de freelancing par son expertise dans l’IT et ses valeurs de transparence et de proximité. Actuellement, afin de répondre aux besoins de nos clients, nous recherchons un Développeur Big Data Spark (H/F) à Lyon, Auvergne-Rhône-Alpes, France.

Contexte :

Projet de pilotage et d’analyse du système et doit répondre aux enjeux suivants :

• Assurer le pilotage du système et des processus métier associés.

• Garantir la qualité et la sécurité des informations.

• Contribuer à l’amélioration continue du système.

L’application permet trois principales fonctionnalités :

• Le reporting

• L’export des données

• L’exploitation de données

Elle est utilisée par environ 1500 utilisateurs (analystes, experts métiers, experts SI).

Fonctionnement : 50% sur site à Lyon + 50% télétravail.

Les missions attendues par le Développeur Big Data Spark (H/F) :

Les missions tournent autour de 4 axes :

• Apporter une connaissance en Big Data (Spark) pour faciliter la manipulation des données.

• Définir les solutions techniques permettant le traitement massif de données.

• Mettre en place des solutions de stockage de données (SQL, NoSQL, etc.).

• Veiller la sécurisation et la clarté des pipelines de données pour faciliter l’analyse et la transformation.

Activité principale :

• Assure la création, la maintenance, l'optimisation et la sécurité des bases de données.

• Détecte, propose et suit les optimisations des requêtes SQL, PL/SQL afin de garantir les meilleures performances de nos applications métier.

• Assure le support aux équipes de développement afin d’identifier et proposer des solutions performantes SGBD les mieux adaptées d’un point de vue métier.

• Apporte une connaissance transverse sur Spark.

Activité secondaire :

• Veille technologique sur les outils utilisés au sein du projet.

• Partage et formation sur les guides de bonnes conduites.

Stack technique de l'équipe :

• Big Data: Spark, Hive, Indexima.

• Stockage: Oracle, CEPH S3 (parquet).

• Langages: Java, Python, PL/SQL, Shell.

• CI/CD: Ansible, Terraform, Jenkins, GIT.

• ETL: Informatica.

• Dataviz: Tableau Server.

• Ordonnanceur: Control-M.