Data Engineer Snowflake - Freelance (H/F)

Localisation : Issy-les-Moulineaux (92)
Télétravail : 2 jours/semaine, dont le vendredi
Présentiel : 3 jours/semaine obligatoires
Démarrage : ASAP
Durée : Prestation longue durée
Nombre de profils recherchés : 2
Type de contrat : Freelance / prestation

CONTEXTE

Notre client, un grand groupe, fait évoluer son DataHub d'une architecture BI traditionnelle vers une architecture Data Lakehouse.

L'objectif est notamment de migrer les flux existants, mettre en place de nouvelles zones data et progressivement décommissionner Talend.

L'architecture cible s'appuie principalement sur Snowflake et AWS.

Dans ce contexte, nous recherchons 2 Data Engineers Snowflake pour renforcer l'équipe technique.

Les consultants interviendront à la fois sur les projets de migration vers le Lakehouse, les évolutions du périmètre data existant ainsi que sur les sujets de Run et de production.

VOS MISSIONS

MIGRATION TALEND → SNOWFLAKE

*

Analyser les jobs Talend existants

*

Reprendre et documenter les traitements

*

Migrer les traitements ETL vers des patterns ELT natifs Snowflake

*

Réécrire les jobs et réaliser les tests

*

Effectuer les recettes et tests de non-régression

*

Participer au décommissionnement progressif de Talend

DATA LAKEHOUSE

*

Participer à la conception et à la mise en œuvre de l'architecture Data Lakehouse

*

Travailler sur les différentes zones : Landing, Lakehouse, Data Products

*

Concevoir et développer des pipelines de données

*

Mettre en œuvre les patterns ELT

SNOWFLAKE

*

Développer en Snowflake SQL

*

Mettre en œuvre Snowpipe pour les flux batch et temps réel

*

Utiliser Snowpark / Python

*

Participer à la gestion des rôles et des accès avec RBAC

*

Mettre en œuvre le tagging et le masking

*

Superviser et optimiser les traitements Snowflake

*

Participer à l'optimisation des coûts

INDUSTRIALISATION & RUN

*

Automatiser les traitements et les déploiements

*

Participer à la mise en place et à l'amélioration de la CI/CD Data

*

Utiliser Terraform

*

Analyser et résoudre les incidents de production

*

Réaliser les analyses de cause racine

*

Mettre en place des corrections durables

*

Assurer le suivi et la documentation des incidents

PROJETS & ÉVOLUTIONS

*

Participer au cadrage des besoins

*

Réaliser les chiffrages

*

Concevoir et développer les évolutions

*

Réaliser les tests et la recette

*

Participer aux mises en production

*

Assurer la documentation des développements

COMPÉTENCES RECHERCHÉES

OBLIGATOIRES

*

Snowflake : expertise confirmée

*

SQL avancé

*

Snowpipe

*

Snowpark

*

Python

*

RBAC / sécurité Snowflake

*

Terraform

*

Talend ou un ETL équivalent

*

Expérience de migration ETL → ELT

*

Expérience en maintenance évolutive et corrective

LES COMPÉTENCES SUIVANTES SONT UN PLUS

*

AWS, notamment Lambda et services serverless

*

Power BI

*

Architecture Data Lakehouse

*

Architecture Data Mesh

*

CI/CD Data

*

Optimisation des coûts Snowflake

LIVRABLES

Le consultant pourra notamment être amené à produire :

*

Inventaire et documentation des jobs Talend repris

*

Pipelines Snowflake industrialisés

*

Modèles Data Lakehouse documentés

*

Contribution à la stratégie de migration et de décommissionnement de Talend

*

Développements sur les projets et demandes évolutives

*

Documentation et suivi des incidents de production

Nous recherchons un Data Engineer confirmé à senior, capable d'intervenir aussi bien sur les sujets de développement que sur l'industrialisation et le Run.

Le profil devra être particulièrement à l'aise sur Snowflake + Terraform + migration Talend/ETL vers ELT.

Une expérience concrète dans des environnements Data