Mission freelance Data Ingenieur / Data architect

Principales missions et tâches à effectuer :

• Accompagnement de l’équipe OPS pour la migration vers Cloudera Data Plateform

• Compléter la Roadmap Architecture et la mettre en place (Rationalisation des environnements ; distribution Hadoop; Stratégie de Backup; Process d'onboarding: nouveau cas d'usage, nouvel utilisateur; Secret Management; SSSD; Refonte de l'organisation LDAP; Gestion des permissions; SSO; Haute disponibilité; Catalogue de données et de usecase …)

• Poursuivre et mettre en place la politique de Gouvernance DATA sur la plateforme.

• Assister l'équipe exploitation en cas de blocage dans le déploiement des livraisons, l'installation des outils, le debug.

• Soutenir les travaux de développement de pipeline de l'équipe DATA ING (choix techniques, optimisation de perfs, bonnes pratiques etc.).

Technos/Outils du projet :

Les outils de stockage : Hadoop, Hive, Hbase, Postgresql, Ceph

Les outils de gestion de calcul distribué : Spark, Yarn

Les outils de prototypage : Jupyter, Dataiku, Hue, Airflow

Les outils d’alimentation : Kafka, Nifi

Les outils d’affichage : Grafana, Tableau

Les outils d’administration : Kerberos, Zookeeper, Solr, Ranger, Atlas, Ldap

Les outils de proxyfication : Knox, HAProxy

Les outils de supervision : Prometheus

Les outils de configuration management : Puppet, Ansible

Outil de secret management: Vault

Cloud Computing: Openstack