TROUVE TES PROCHAINES MISSIONS FREELANCE ET PROPULSE TA CARRIÈRE !

Nous constituons un vivier de freelances spécialisés en data engineering pour anticiper les besoins de nos clients sur des projets Big Data et Cloud. Nous recherchons des Data Engineers expérimentés sur Spark et Scala, capables d'intervenir rapidement sur des missions à Nantes et Rennes, dans des contextes variés (banque/assurance, industrie, retail, services). En tant que Data Engineer Spark / Scala, vos missions pourront inclure : - Conception et développement de pipelines de données : ingestion, transformation, nettoyage et enrichissement de données massives. - Développement d'applications distribuées avec Apache Spark (Batch et Streaming) en Scala. - Industrialisation des traitements Big Data : optimisation des performances, gestion des volumes importants, parallélisation. - Mise en place d'architectures data : Data Lake, Data Warehouse, solutions temps réel. - Intégration Cloud : déploiement et utilisation des services Big Data sur AWS, Azure ou GCP (EMR, Databricks, Synapse, BigQuery, etc.). - Tests, qualité et fiabilité : mise en place de bonnes pratiques de développement (CI/CD, tests unitaires et fonctionnels). - Sécurité et conformité : respect des normes RGPD et bonnes pratiques de gouvernance des données. - Documentation et partage : rédaction des spécifications techniques, bonnes pratiques et transmission de compétences aux équipes internes. - Collaboration transverse : travail étroit avec les Data Scientists, Data Analysts, Product Owners et Architectes pour répondre aux besoins métiers.

En tant que Data Engineer, vous aurez un rôle clé dans la mise en place et l'optimisation des pipelines de données. Vous serez en interaction avec des équipes pluridisciplinaires (développeurs, data scientists, métiers) pour construire des solutions performantes et scalables. Vos missions au quotidien - Développer et optimiser des pipelines de données massifs avec SparketScala. - Assurer l'ingestion, le nettoyage et l'enrichissement des données en vue de leur exploitation. - Exposer les données via des API et Web Servicespour les rendre accessibles aux applications et modèles ML. - Contribuer à l'industrialisation et à la mise en production des traitements Big Data. - Collaborer avec les data scientists pour améliorer la maturité industrielle des modèles de machine learning. - Maintenir et optimiser les solutions en production pour garantir leur performance et leur robustesse. Votre environnement technique

En tant que Data Engineer, vous aurez un rôle clé dans la mise en place et l'optimisation des pipelines de données. Vous serez en interaction avec des équipes pluridisciplinaires (développeurs, data scientists, métiers) pour construire des solutions performantes et scalables. Vos missions au quotidien -Développer et optimiser des pipelines de données massifs avec Spark et Scala. -Assurer l'ingestion, le nettoyage et l'enrichissement des données en vue de leur exploitation. -Exposer les données via des API et Web Services pour les rendre accessibles aux applications et modèles ML. -Contribuer à l'industrialisation et à la mise en production des traitements Big Data. -Collaborer avec les data scientists pour améliorer la maturité industrielle des modèles de machine learning. -Maintenir et optimiser les solutions en production pour garantir leur performance et leur robustesse. Votre environnement technique -Langages : Java (J2EE / JDK 17), Scala

Mission à pourvoir en régie à Lyon Présence sur site hybride Le consultant devra être en mesure d'assurer les missions suivantes : 1. Suivi de production & amélioration continue Analyse des incidents et mise en œuvre de correctifs durables Supervision des traitements récurrents Mise en œuvre d'améliorations (robustesse, supervision, industrialisation) Reporting sur les traitements et gestion du processus de changements 2. Coordination technique Coordination avec l'équipe plateforme Data et les intégrateurs du CSM Participation aux ateliers métier pour suivi technique et évolutions Proposition de bonnes pratiques et d'améliorations techniques 3. Analyse, conception & développement Contribution à la conception technique & architecture Rédaction des spécifications techniques à partir des besoins métier Développement de flux de données dans Matillion (SQL & Python) Accompagnement des mises en production

* Participation aux ateliers techniques afin de cadrer et étudier les besoins d'onboarding des offres Cloud IAAS, PAAS, SAAS * Conception des solutions et architectures Cloud cibles en respectant les critères : Sécurité, haute disponibilité, résilience, coûts et performances, évolutivité * Mise en place du "Cloud Adoption Framework" adapté aux contraintes et diffusion des standards aux entités du groupe * Définition des méthodologies de déploiement en fonction des patterns et des plans de migration * Rédaction des dossiers d'architecture et spécifications techniques (HLD, StarterKits …) * Conception et Co-construction des socles techniques (sécurité, réseau, gouvernance...) * Intégration des offres Cloud avec les infrastructures On-Premise et notamment les problématiques d'hybridation (Interco, DNS, Authentification, ...) * Déployement et industrialisation des architectures cibles * Automatisation des déploiements d'infrastructure / ressources avec une approche IaC (Infrastructure as Code) * Veille à la sécurité et la fiabilité des environnements déployés avec une orientation Security by design * Mise en place les outils d'automatisation et de monitoring adaptés aux environnement Cloud * Assurance et le support avancé sur les solutions mises en oeuvre

Mettre en place une prestation de chef de projet pour l'estimation, la planification, la coordination et le suivi de la mise en oeuvre des infrastructures requises pour le déploiement des projets digitaux. CONTRAINTE : NATIONALITE FRANÇAISE REQUISE POUR HABILITATION ENVIRONNEMENT TECHNIQUE DE LA PRESTATION La coordination IT a pour rôle de fournir les entrants nécessaires à l'estimation, le suivi et la mise en oeuvre de la construction de l'infrastrure des projet digitaux de la DSI. La prestation s'intègre dans la méthodologie projet du groupe et doit garantir le passage des jalons sur les activités de construction d'infrastructure. PRESTATION ATTENDUE Les activités du chef de projet coordination IT :? Planification de projet IT : o Elaborer des plans de projets détaillés pour les initiatives nécessitant de faire évoluer l'infrastructure (calendrier, budget, ressources?) o Cadencer les activités liées à l'infrastructure et actualiser le planning o Chiffrage des activités ? Gestion technique sur le volet infrastructure o Superviser et gérer tous les livrables techniques liés à l'infrastructure pour chaque projet en collaboration avec les équipes affiliées (dossier d'exploitation/d'installation, documents d'architecture, tableau de charge, backlog projet, planning projet, rapports des tests techniques?) o Capitalisation des connaissances ? Coordination des activités de construction d'infrastructure o Coordonner et superviser les activités de BUILD de l'infrastructure relative au projet via les tickets ServiceNow o Suivre et valider les activités des équipes techniques de la phase conception à la clôture o S'assurer de l'exhaustivité des livrables projets liés à l'infrastructure au fil de l'eau ? Communication o Communiquer clairement l'avancement du projet, les risques et les problèmes aux parties prenantes, et remonter les informations clés. o Assurer une communication fluide et efficace avec le chef de projet digital, les architectes et les équipes technique impliquées o Participation à certains jalons digitaux et/ou instances projets (kick-off, Revue de conception, revue de réalisation, revue de qualification, Technical Assement and Security Comitee, Validation à la bonne exécution, validation du service régulier, revue de transfert, et clôture) LIVRABLES Le Prestataire sera tenu de fournir les livrables suivants pour chacun des projets dont il a la charge : o La mise à jour du fichier de suivi du projet o Le planning détaillé pour chaque activité o La mise à jour hebdommadaire des outils de reporting o La complétude des documents techniques (Dossier d'installation, Manuel d'exploitation, dossier d'architecture détaillé, arbre de décision, dossier de tests technique, fiche d'industrialisation) o Un compte-rendu de chaque réunion. o Le dossier de clôture du projet o un rapport...