Smartpoint est une société de conseil et de services numériques, pure player Data depuis 2006. Nos compétences reconnues dans ce domaine nous permettent d'être « Preferred Vendor » auprès d'entreprises prestigieuses. Nous sommes en effet référencés parmi les plus grands comptes français dans les domaines de la banque, de l'énergie, des médias, des télécoms ou encore de la grande distribution. Nous rejoindre c'est intégrer une équipe de plus de 300 consultants et experts animée par une vision commune : Une utilisation éthique des données, moins énergivore et conforme dès la conception (RGPD) ; Une approche Smart Data pour lutter contre le Data Swamp, (ces entrepôts de données qui stockent des données inutiles) et permettre une exploitation des données plus durable ; Une méthode de développement agile et des pratiques XOps (DataOps, MLOps, PlatformOps) pour une stack technologique automatisée, qui réduit les process et les technologies utilisées et accélère
le time-to-market.
Nous recherchons un développeur Big Data pour accompagner une migration de Teradata vers Hadoop Cloudera. Ce projet ambitieux nécessite des compétences techniques pointues ainsi qu'une capacité à s'adapter rapidement aux défis d'une migration complexe.
* Participer à la migration de données et de traitements de Teradata vers Hadoop Cloudera.
* Concevoir, développer et optimiser des pipelines de données (ELT) adaptés aux nouvelles architectures.
* Développer des scripts Shell pour automatiser les traitements et les flux de données.
* Exploiter Apache Spark pour le traitement des données massives.
* Collaborer avec les équipes projet pour garantir la bonne exécution de la migration.
* Documenter les processus et les solutions mises en œuvre.
* Maitrise des outils ELT et des workflows de gestion des données.
* Expérience en développement Spark pour le traitement et la manipulation de données massives.
* Compétences en scripting Shell (Bash, Linux) pour automatiser les tâches.
* Connaissance de Teradata ou Hadoop Cloudera.
* Une expérience préalable sur des projets de migration de données serait un véritable atout., Nouveauté ! Avec Free-Work MyBusiness, vous pouvez désormais gérer votre facturation, vos clients et votre activité facilement. C'est gratuit et sans engagement !
* Vous disposez de 3 ans d'expérience dans le domaine du Big Data ou en développement de données.
* Vous êtes rigoureux(se), autonome et doté(e) d'une capacité d'adaptation rapide.
* Vous avez un bon esprit d'équipe et des compétences en communication pour travailler efficacement avec les autres membres du projet., * Vous disposez de 3 ans d'expérience dans le domaine du Big Data ou en développement de données.
* Vous êtes rigoureux(se), autonome et doté(e) d'une capacité d'adaptation rapide.
* Vous avez un bon esprit d'équipe et des compétences en communication pour travailler efficacement avec les autres membres du projet.
Environnement de travail
* Maitrise des outils ELT et des workflows de gestion des données.
* Expérience en développement Spark pour le traitement et la manipulation de données massives.
* Compétences en scripting Shell (Bash, Linux) pour automatiser les tâches.
* Connaissance de Teradata ou Hadoop Cloudera.
* Une expérience préalable sur des projets de migration de données serait un véritable atout.