Trouvez votre prochaine offre d’emploi ou de mission freelance Snowflake

Notre client dans le secteur Industrie recherche un Data engineer Snowflake H/F But du projet : Migrer techniquement les extractions et les transformations de données du flux marketing de la base de données GDW depuis les outils INFORMATICA , SQL Server et SAS vers notre environnement data stratégique One Data Plateforme (Snowflake). Si cela ne met pas en risque la date de livraison, DBT et airflow peuvent être utilisés sur ce projet. Les principales taches seront : - Effectuer le reverse engineering des flux informatica - implémenter les flux dans snowflake - Orchestrer les flux dans snowflake - effectuer la recette en 1 pour 1 des fichiers produits

Contexte de la mission : Viveris accompagne ses clients dans la sécurisation de leurs infrastructures, tant pour l'informatique de gestion que pour l'informatique industrielle. Dans ce cadre, nous recherchons un Consultant Snowflake. Dans ce rôle, vous serez responsable de la conception, du développement et de la gestion de l'entrepôt de données Snowflake, ainsi que de la création et de la maintenance des pipelines de données pour répondre aux besoins métier complexes de nos clients dans le domaine maritime. Intégré au sein de l'équipe Data, vous collaborerez avec l'architecte data et le responsable de la plateforme vous contribuerez à la mise en place ou l'amélioration de la partie Snowflake ainsi qu'à l'accompagnement des équipes off-shore. Responsabilités : - Concevoir et mettre en oeuvre des solutions de data warehousing basées sur Snowflake pour répondre aux besoins métier spécifiques du secteur maritime ; - Contribuer à l'amélioration à la gestion et aux résultats FinOps ; - Développer et maintenir les pipelines de données pour l'extraction, la transformation et le chargement (ETL) des données dans Snowflake.

Client : secteur de l'Energie Lieu : Bois-Colombes Remote : 2j/semaine Recherche 4 experts Data Engineer / Data Analysts qui auraient au moins 3 ans d'XP sur Snowflake. Voici les compétences demandées : Maîtrise des process d'ingestion en batch et streaming quelle que soit la typologie de sourcing des données (API, Fichier structuré, semi structuré, non structuré, BDD, …) et quel que soit le Cloud provider en entrée (AWS/AZURE). Expertise BDD Snowflake avec minimum 3 ans d'expérience (SnowSQL, Rôles, Virtual Warehouse, Datamodelling) Très bonne maîtrise des langages SnowSQL (impératif), Javascript, T-SQL, Python (ex : Panda, NumPy) Optimisation de requête et performance, factorisation du code, respect de l'état de l'art. Capacité à faire du code review et assumer le rôle de release manager. Capacité d'analyse avancée pour résoudre les incidents techniques ou fonctionnels avec Tests unitaires et code quality. Parfaite maitrise de GIT et connaissance d'un outil de gestion de configuration tel que Azure Devops (Méthode GITHubflow), CI/CD/Artefact

Au sein de notre Cloud AWS, nous faisons converger nos univers big data et BI coeur de métier assurance. Dans ce cadre le service 'Data Analyst' change d'outils de préparation de données et de stockage. Ainsi, la préparation des données passe de Matillion (générateur de SQL avec moteur de BDD Redshift) à Data Science Studio (Dataïku), et le stockage passe de S3/Redshift à Snowflake. Le renfort recherché doit :- réaliser cette migration sur une partie des data prep en production- accompagner les équipes dans leur montée en compétence sur Snowflake et Dataïku- permettre à l'équipe de maintenir sa productivité en parallèle de la migration. Nature et étendue de la prestation Le renfort interviendra en tant que 'Data Analyst'. Il sera en charge de la transformation des dataprep de Matillion vers SnowFlake/DSS en collaboration avec les DA de l'équipe. Il devra être en capacité de faire de la pédagogie auprès des équipes de DA afin d'optimiser le code existant pour qu'il soit utilisé sur un nouveau flow DSS avec Snowflake Il devra également participer aux réunions qui l'impacteront Livrables attendus & planning- Aplatissement/Optimisation des requêtes existantes dans Matillion (Redshift SQL)- Migration des requêtes dans de nouveaux flows dans DSS avec le connecteur Snowflake SQL- Comparaison du contenu et de la volumétrie entre les tables finales existantes (S3) et les nouvelles tables (Snowflake)- Mise en place de métriques et de vérification dans le flow DSS- Documentation des flows- Paramétrage de l'exécution des traitements Airflow via dynamoDB

Client : secteur de l'Energie Lieu : Bois-Colombes Remote : 2j/semaine Recherche 4 experts Data Engineer / Data Analysts qui auraient au moins 3 ans d'XP sur Snowflake. Voici les compétences demandées : Maîtrise des process d'ingestion en batch et streaming quelle que soit la typologie de sourcing des données (API, Fichier structuré, semi structuré, non structuré, BDD, …) et quel que soit le Cloud provider en entrée (AWS/AZURE). Expertise BDD Snowflake avec minimum 3 ans d'expérience (SnowSQL, Rôles, Virtual Warehouse, Datamodelling) Très bonne maîtrise des langages SnowSQL (impératif), Javascript, T-SQL, Python (ex : Panda, NumPy) Optimisation de requête et performance, factorisation du code, respect de l'état de l'art. Capacité à faire du code review et assumer le rôle de release manager. Capacité d'analyse avancée pour résoudre les incidents techniques ou fonctionnels avec Tests unitaires et code quality. Parfaite maitrise de GIT et connaissance d'un outil de gestion de configuration tel que Azure Devops (Méthode GITHubflow), CI/CD/Artefact

Date de démarrage souhaitée : ASAP Snowflake Expert Expérience : 10 ans dont 3 ans Snowflake Compétences requises : Très bonne maitrise et expérience Snowflake sur un compte important et mature. Compétences et expériences de type DBA Connaissance de l’écosystème de la gestion de données (profil Data Engineer) Principes ETL/ELT : dbt, autres. Bon niveau d’Anglais pour les échanges off-shore. Soft skills : o Force de proposition o Autonomie o Dynamisme o Fédérateur / Communiquant Connaissance des outils suivants : o Obligatoire : Snowflake o Important : AWS o Dbt o JIRA/Confluence o Kubernetes/Containers

Architecte Data Azure et Snowflake . - Il maîtrise le panel des exigences fonctionnelles et non fonctionnelles à collecter afin d'assurer l'efficience opérationnelle et la pérennité de la data platform. - Expert et maîtrise tous les outils et services de l’écosystème Azure et a des facilités pour étendre votre champ de compétences. - proactif/ve sur la veille technique et la capitalisation et veille à garder toujours un temps d'avance sur l'état de l'art du secteur afin de pouvoir guider ses clients. - En tant qu'architecte expérimenté(e) il peut intervenir sur des missions opérationnelles pour concevoir la solution cible ou en phase de cadrage amont pour guider les choix et construire les roadmaps. - pédagogue et sait communiquer et vulgariser des réflexions complexes pour les rendre accessibles à tous.

Contexte: Notre plateforme Data & Analytics repose sur des design paterns où les ingestions de données sont paramétrées et ingérées en mode « delta-lake »(Tables de streaming). Toutes les transformations et règles de gestions sont réalisées au sein de nombreuses procédures stockées (SQL et javascript), voire Python avec Snowpark (pour les transformations plus techniques et avancées). Ces transformations sont ordonnancées par le service Azure Automation et supervisées via le service managé logAnalytics. Les déploiements sont gérés par des chaînes complètes CI/CD d’Azur. Gestion des incidents infra, plateforme, réseau, et applicatifs complexes. Périmètres : AZURE et Snowflake • Support exploitation transverse et Interface avec Service IT Transverse de la DSI (Equipes Infra, Cloud, Sécurité, Architecture, Outillage…) • Interlocuteur technique privilégié avec les supports éditeurs (Microsoft, Snowflake) • Gestion de l'obsolescence des 50 VM (OS, Middleware, applications tierces) • Gestion de l'obsolescence des composants Azure • Gestion du parc de Workstation (Affectation, création, suppression) • Analyse & correction des impacts générés par d'autres services (FARO Cyber, Annuaire, Coud Business Office, sécu, ...) • Mise en place et Monitoring de l'infrastructure • Développement script d’administration • Développement d’alertes de sécurité • Développement solutions applicatives • Développement solutions infrastructure/sécurité (Infra As Code) (Subnet et Security Groupe prédéfinis, Gestion des rôles, des clés de chiffrement, des contrôles automatisés, Audit de sécurité) • Veille aux respects des principes généraux de sécurité et des règles de cybersécurité du Groupe • Conception et implémentation des modèles de sécurité Azure • Revue des comptes Azure AD • Gestion des réseaux virtuels (Plan d'adressage IP, NSG, table de routage) • Pilotage ouverture de Flux CWAN • Veille au respect de l'état de l'art pour les langages de développement (SQL, C#, Powershell) • Revue et amélioration de code (SQL, C#, Powershell) • Maintenance et développement en amélioration continue du framework d’alimentation et de supervision de la plateforme PDA (.net/Powershell/Javascript) • DBA étude : Code review, audit et validation des PR, optimisation de requête et performance/factorisation, veille au respect des bonne pratique de code, Contrôle et ajustement des performances des bases de données (SQL Serveur, Snowflake, Managed Instance, Azure SQL) • DBA Système : Conception et implémentation des modèles de sécurité des bases de données, gestion de la performance des bases de données, monitoring et résolution d'incidents DEVOPS : • Administration Azure Devops (Gestion des accès, Sécurité, création de repo, affectation de licence) FinOps: • Cost management opérationnel et forecast • Optimisation des usages infra/services et plateforme

Nous recherchons pour l’un de nos clients, un(e) Data Engineer Missions (liste non exhaustive) : -Création/modification d’objets de base de données Snowflake -Développement de procédures stockées sur Snowflake (SQL & Javascript) -De l’environnement de développement à la mise en œuvre de l’environnement de production en utilisant le processus CI/CD -Assurer un haut niveau de service, y compris la cadrage, build, run et la gestion des incidents. -Assurer la qualité des codes fournis par l’équipe de développement

Au sein de la DSI du groupe, la direction Data s’appuie sur les meilleures expertises et technologies pour accompagner les équipes opérationnelles au quotidien en leur mettant à disposition outils, Description de la mission En tant que Data Product Owner Opérations, vos responsabilités seront les suivantes : • Contribuer à l’amélioration des processus opérations et de mesure de la performance en étroite collaboration avec les équipes opérationnelles, • Identifier les données disponibles, les données à collecter afin de mesurer la valeur que la Data pourra apporter aux équipes • Proposer et mettre en œuvre les outils Data adaptés sur la base de l’analyses des problèmes rencontrés sur le terrain • Participer aux différentes cérémonies agiles • Assister les utilisateurs lors des phases de déploiement des nouvelles fonctionnalités, être attentifs à leurs feedback

Les missions pour le poste sont les suivantes :L'administration courante de MAJ et patching des plateformes Snowflake et BigQuery, Assurer la résolution des incidents (pas de niveaux), Réaliser le MCO des plateformes et les sauvegardes spécifiques, Intégrer les données et les sécuriser, Faire évoluer les plateformes en fonction des besoins et des métiers, Optimiser les performances des plateformes, Documenter les évolutions et incidents.

Je cherche pour l'un de nos clients un Data Engineer Snowflake/Azure avec une expérience de 4 ans au minimum. Missions: Apporter une expertise en Big Data permettant la manipulation de données Concevoir et conseiller les solutions permettant de traiter des volumes importants de données Mettre en place des bases de données et des pipelines Assurer la sécurité des traitement et leurs bon fonctionnement Développer en équipe, savoir recetter des traitements, les mettre en production et les maintenir Documenter son travail et savoir transférer son savoir Environnement technique indispensable : Azure, Snowflake, synapse, sql, airflow Force de proposition tout en respectant les règles imposés Esprit Analytique et de Synthèse Esprit d’équipe Sens de l’organisation

Au sein de la DSI du groupe, la direction Data s’appuie sur les meilleures expertises et technologies pour accompagner les équipes opérationnelles au quotidien en leur mettant à disposition outils, Description de la mission En tant que Data Quality, vos responsabilités seront les suivantes : • Assister les Product Owners dans la mise en place du dispositif de qualité des données défini par les Data Owners (définition des exigences qualité, des contrôles, des KPIs et seuils d’alerte) • Animer le processus de gestion des incidents de qualité de données en faisant le lien entre les utilisateurs opérationnels et les équipes Data & IT • Aider les équipes opérationnelles à qualifier les incidents (impacts sur les usages, chiffrage, sévérité) • Analyser les root causes des incidents grâce à l’exploration des données des différentes bases • Proposer et instruire des plans de remédiations (identifier les solutions de contournement si besoin) • Prioriser les sujets en fonction de leur importance / urgence et de la difficulté à les développer • Collaborer avec les équipes de développement (Data Enginer, Dataviz Enginer) pour les analyses et la mise en place de solutions de correction • Collaborer avec les Data Owners afin de s’assurer de la cohérence et pertinence des solutions proposées • Proposer des outils / process / KPI afin de contribuer à l’amélioration continue de la qualité des données • Assister le Product Owner Master Data dans la conception de tableau de bord de pilotage de la qualité des données

En collaboration essentiellement avec l’architecte data et le responsable de la plateforme, vous contribuerez à la mise en place ou l’amélioration de la partie Snowflake ainsi qu’à l’accompagnement des équipes off-shore. Vous serez amenés à produire des design et de la documentation mais aussi des prototypes et produits finis pour lesquels vous devrez ensuite préparer et suivre la prise en main par les équipes off-shore. Activités : - Optimisations de performance et de coûts incluant mais non limité à l’optimisation des requêtes, des warehouse, etc - D’une manière plus générale amélioration à la gestion et aux résultats FinOps. - Gestion de la sécurisation des données selon les diverses possibilités offertes par Snowflake. - Mise en place de nouvelles fonctionnalités offertes par Snowflake. Télétravail possible avec un jour de déplacement par mois à Marseille.

Nous recherchons un ingénieur de données Snowflake senior pour rejoindre notre équipe Data Factory en pleine croissance. La personne recrutée sera responsable des nouveaux développements de pipelines de données conformément aux normes, aux meilleures pratiques et à tous les principes CI/CD. Il doit être autonome et à l'aise pour répondre aux besoins en données de plusieurs équipes, systèmes et produits pour différentes équipes commerciales à travers le monde. Nous avons besoin de quelqu'un techniquement opérationnel dès le premier jour, qui peut soutenir et aider à développer le profil des juniors.

Consultant ayant au moins 5 ans d'expérience avec Talend du domaine BI/Data & Analytics - Avoir des connaissances sur Talend - Avoir des connaissances sur SnowFlake - Avoir des connaissances sur la construction de DataWarehouse/Data Mart - La connaissance de l'ingestion de données n'est pas cruciale (car cela hors de portée de mon équipe) - La connaissance d'Azure Data Factory est un plus - Des connaissances sur CI/CD sont agréables à avoir - Expérience avec les données SAP, ce serait un avantage supplémentaire. - Prêt à faire à la fois le mode Support et le mode Projet