Mission freelance Azure Data Engineer

Nous recherchons un ingénieur Azure Data pour rejoindre l'équipe Advanced Analytics Service Delivery Team.

L'objectif de l'Advance Analytics SDT est de fournir des capacités autour de l'intégration et de l'ingénierie des données et du déploiement de modèles pour les cas d'utilisation prioritaires. L'équipe est composée d'ingénieurs en données, d'experts en la matière, d'architectes de services, d'ingénieurs DevOps, de testeurs, de propriétaires de produits techniques et de Scrum Master. La hiérarchisation du carnet de commandes est effectuée en collaboration avec les propriétaires de produits commerciaux sur la base du pipeline de cas d'utilisation.

L'équipe soutient la Cloud Analytics Platform pour créer des capacités autour de solutions numériques et d'analyses avancées. La plateforme héberge le lac de données de l'entreprise du client où les données IoT provenant des équipements des usines des clients dans le monde entier sont collectées et complétées par des sources de données internes. L'équipe utilise ses capacités d'ingénierie des données pour obtenir des informations et générer des solutions aux problèmes des clients.

En tant que Data Engineer, vous devrez :

- Identifier les ensembles de données nécessaires pour chaque cas d'utilisation en collaboration avec les équipes sources et les analystes commerciaux

- Intégrer les données dans le lac de données de l'entreprise

- Déplacer et transformer les données du lac de données vers la base de données SQL ou le serveur de données SQL, en fonction du cas d'utilisation.

- Implémenter la logique en fonction des besoins de l'entreprise (par exemple, définition des KPI, etc.)

- Collaborer avec d'autres équipes informatiques pour créer une solution complète autour d'un cas d'utilisation.

- Gestion du cycle de vie des cas d'utilisation livrés

Qui êtes-vous ?

- Expérience avec la plateforme Microsoft Azure (Data Lake, Data Factory, Databricks, Data Warehouse, Azure DevOps)

- Expérience dans la modélisation de bases de données et d'informations

- Expérience avec la manipulation de données en utilisant SQL et Python (R est un bonus)

- Expérience avec Apache Spark Framework (de préférence PySpark - Python)

- Expérience avec des langages de script tels que Python et PowerShell (C#/. NET)

- Expérience de l'intégration de systèmes et de services

- Expérience de la consommation d'API REST

- Expérience du développement d'API REST (de préférence avec Flask - Python)

- Expérience des conteneurs Docker