Dans le cadre d'un projet de migration data depuis Google Cloud Platform (GCP / BigQuery) vers Microsoft Fabric, vous intervenez en tant que Data Engineer. Le client est un grand compte du secteur de la chimie. L'objectif est de migrer l'intégralité de l'environnement data : GCP, BigQuery et Talend, vers une plateforme Microsoft Fabric unifiée. Vous prenez en charge la construction des pipelines et la migration effective des données depuis les systèmes sources.
En tant que Data Engineer, vous êtes en charge de : * Développer les pipelines d'ingestion et de transformation avec Fabric Data Factory et Dataflows Gen2 * Migrer les données depuis Google BigQuery vers les Lakehouses et Warehouses Fabric * Construire les connecteurs et workflows pour extraire les données depuis SAP, Salesforce, Oracle et des partages de fichiers * Ré-implémenter la logique ETL existante (Talend) dans l'environnement Fabric, en collaboration avec l'ingénieur Talend dédié * Encadrer les ingénieurs juniors de l'équipe : revues de code, respect des standards, accompagnement technique * Diagnostiquer et optimiser les pipelines en production : performance, fiabilité, maîtrise des coûts * Produire la documentation technique complète : runbooks, tests unitaires, traçabilité dans Azure DevOps
Formation et expérience * 7 ans et plus en ingénierie data avec une expérience concrète sur la stack data Azure * Expérience de migration de données depuis des systèmes sources hétérogènes : ERP, CRM, bases de données * Expérience en encadrement technique d'ingénieurs juniors sur un projet Compétences techniques * Microsoft Fabric : maîtrise opérationnelle - Data Factory, Notebooks, Dataflows Gen2 * Langages : Python (PySpark) et SQL - expertise en transformation de données à grande échelle * Sources systèmes : expérience d'extraction depuis SAP, Salesforce et/ou Oracle * CI/CD : pratique concrète avec Azure DevOps et Git - commits documentés, déploiements tracés, tests unitaires * BigQuery : connaissance des mécanismes d'export et de la structure des données GCP Posture et mode de travail * Autonomie technique sur un périmètre large : capable d'identifier un problème et de le résoudre sans escalade systématique * Rigueur documentaire : chaque pipeline livré est documenté, testé et lié à un work item dans Azure DevOps * Capacité à travailler en équipe pluridisciplinaire : architecte, QA, Talend, chef de projet * Français courant - anglais courant Ce qui pourra faire la différence * Expérience directe sur Microsoft Fabric en environnement de production - pas uniquement en POC ou formation * Connaissance de Talend et capacité à lire et comprendre des pipelines ETL existants pour les re-implémenter * Expérience simultanée sur plusieurs sources complexes : SAP + Salesforce + Oracle sur un même projet * Disponibilité rapide souhaitée - à discuter selon profil
Partager cette mission via
Explore ces missions en lien avec tes compétences et ton expérience.
