Mission freelance Cloud Data Engineer Azure

Cherry Pick est à la recherche d'un "Data Azure Engineer" pour un client dans le secteur de l'énergie.

Contexte 

Au sein de notre équipe Data Platform, vous interviendrez avec d'autres Data Engineers et

DevOps dans les activités de création et d'interaction avec des solutions de Data Lake (Gen 2),

de maintien et d'évolution du processus de déploiement automatisé avec Terraform, de

développement de microservices en Python, et de monitoring et d'exploitation de la Data

Platform. Vous aurez une expérience significative sur l'environnement des données en Cloud

(Azure), en particulier sur les services de données : ADLS Gen 2, Data Factory, WebApp, VNET,

NSG. Une expérience sur AWS (S3, VPC) est un plus.

Missions 

Développement et gestion de la data plateforme

• Concevoir, déployer et maintenir une architecture Data Lake (Gen 2) sur Azure.

• Développer des pipelines de données avec Azure Data Factory et Databricks.

• Assurer le monitoring et l’exploitation de la Data Platform.

Automatisation et Infrastructure-As-Code 

• Mettre en place et améliorer les déploiements automatisés avec Terraform.

• Gérer les environnements cloud (Azure et AWS en option) via Docker, Kubernetes, VNET, NSG.

Développement de Microservices et intégrations 

• Développer des microservices en Python pour interagir avec les données.

• Concevoir des APIs et services pour faciliter l’accès aux données

Sécurité et optimisation

• Implémenter des meilleures pratiques DevOps et Software Craftsmanship.

• Optimiser la performance des traitements de données.

• Sécuriser l’infrastructure et les accès aux données.

Collaboration et méthodologie agile 

• Travailler en méthodologie Agile (Scrum, Kanban).

• Collaborer avec les équipes Data, DevOps et les parties prenantes pour répondre aux besoins métiers.

• Être force de proposition et assurer une veille technologique continue.