Non renseigné
Dans le cadre du lancement d'un nouveau projet, nous recherchons un Data Engineer senior pour concevoir et mettre en œuvre des pipelines de données dans un environnement serverless exigeant. Le prestataire doit être capable de produire et de comprendre les enjeux métier, cadrer les sujets en amont, faire les bons choix de conception et diffuser son savoir-faire au sein de l'équipe.
- Concevoir et développer des pipelines de données en Python.
- Implémenter des traitements batch avec Azure Durable Functions.
- Manipuler des données volumineuses au format Parquet.
- Mettre en place des validations de schémas et contrôles qualité.
- Assurer l’intégration avec des APIs externes.
- Participer à la modélisation et optimisation des bases Azure SQL.
- Industrialiser les déploiements via CI/CD.
- Garantir la qualité et sécurité du code.
- Contribuer à l'analyse des besoins avant implémentation.
Compétences clés :
- Expertise en Python, notamment sur Azure Functions (Durable Functions v2).
- Capacité à exploiter différentes sources Azure (Data Lake, Blob Storage).
- Bon niveau d'anglais pour échanger sur sujets techniques à l'écrit comme à l'oral.
Qualifications :
- Expérience confirmée avec PyArrow, Pandas, Polars.
- Compréhension rapide des enjeux métier pour proposer des solutions robustes.
- Utilisation avancée d’outils IA pour améliorer l’ingénierie sans se limiter aux générateurs de code.
Nous proposons une rémunération attractive selon le profil ainsi qu'un environnement propice au partage et à la transmission des connaissances. Vous aurez également accès à diverses formations pour continuer votre montée en compétence dans ce domaine technique.
Partager cette mission via
Explore ces missions en lien avec tes compétences et ton expérience.
