CELAD
Bienvenue chez CELAD ! Depuis nos débuts dans le monde bancaire en 1990, nous avons grandi pour devenir une force majeure dans le domaine de Systèmes d'Information & l'Informatique Industrielle. Notre #TeamCELAD de 1700 collaborateurs est fière de son implication dans ces deux domaines, travaillant avec plus de 250 clients, allant des PME/PMI aux Grands Comptes. CELAD-Montpellier offre des missions stimulantes à forte valeur ajoutée de Nîmes à Narbonne en région Occitanie. Grâce à notre diversité de clients, nous sommes actifs dans des secteurs aussi variés que la Banque et l'Assurance, le Médical, le Public, l'IT, la R&D, et bien d'autres. Une véritable palette d'opportunités qui saura satisfaire tous les appétits ! Nous sommes entièrement impliqués dans la gestion de nos collaborateurs et l'accompagnement de nos candidats, ce qui en fait la base de notre développement ainsi que le reflet de la qualité de notre travail. La bienveillance,
l'enthousiasme et la passion transparaissent dès le premier contact à votre accompagnement au quotidien ! Si vous souhaitez faire partie de l'aventure Celadienne, rejoignez-nous !, New! Démarquez-vous en passant des tests de personnalité gamifiés. Lancez-vous dès maintenant, en découvrant les trois tests disponibles gratuitement!
MISSION
Mettre en place la collecte et la mise à disposition des données au sein de l'entreprise
* Industrialiser et mettre en production des traitements sur les données (par exemple : mise à disposition de tableaux de bords, intégration de modèles statistiques) en lien avec les équipes métiers et les équipes qui les analysent
Activités et tâches :
* Acheminement de la donnée
* Mise à disposition de la donnée aux équipes utilisatrices
* Mise en production de modèles statistiques
* Suivi de projet de développement
* Développement job spark
* Traitement et ingestion de plusieurs formats des données
* Développement des scripts
* Développement et Implémentation des collectes de données, des jobs de traitement et Mapping de données
* Développement des moyens de restitution via génération de fichier et ou API & Dashboarding
* Collecter toutes les données et les fournir aux clients en tant qu'API ou fichiers
* Développer de pipelines d'ingestion à partir de différentes sources (streaming et batch) ainsi que des spark jobs le prétraitement des données et calcul des indicateurs de performance (KPI)
* Développer des API génériques d'ingestion et de traitement de données dans un environnement HDP
* Participer à la conception, mise en place et administration de solutions Big Data
* Participation à l'installation, administration et configuration des Hadoop clusters. Mise en place en Spring Boot des services d'extraction de data du système legacy (tera data), la data sera par la suite envoyée au data lake via des topics Kafka
* Normalisation et agrégation des données afin de produire les rapports sous forme de Business View, La mission va se dérouler au sein de l'IT Data Management & BI dans l'équipe Big Data & API / Squad CCO qui aujourd'hui gére l'Entrepôt des données client de la CIB à travers l'application interne utilisée par les équipes IT et métiers.
L'objectif de la mission est de renforcer l'équipe avec un rôle de Développeur / Data Engineer orienté DevOps au sein de la Squad :
- Gestion de la production
- Gestion de la dette technique
- Revoir l'architecture actuelle et proposer des évolutions
- Développements liés aux projets
Concrètement : la mission principale de la prestation aura pour but de :
- traiter nos obsolescences de Framework (ex : springboot , spark2 )
- moderniser et industrialiser nos pipelines de build en intégrant les bonnes pratiques devsecops :
- migration depuis tfs vers jenkins
- création directe sur jenkins
Le but étant d'optimiser notre code , d'assainir et d'automatiser nos déploiements via xldéploy.
Le code concerne nos apis et nos process de transformation hadoop/spark ( en java , python )
PROFIL RECHERCHÉ
Spark / PySpark /Python / Java / SpringBoot / .net
- Hadoop sur infra on premise
- Hive / SQL/HQL
- Unix/Bash, Le poste Data Engineer Spark Python
CELAD
Technologies de l'Information et de la Communication
Charenton-le-Pont
Temps partiel (≤ 32 heures)
Paiement horaire
400€ min - 400€ max
27/08/2025
Freelance