expert SPARK/SCALA Jean-Michel.io

Contexte

Sur une architecture Big Data permettant de collecter les données de l'ensemble des Back Office dans un Datalake (cluster Hadoop), le projet consiste à exploiter ces données pour alimenter un Dataware communautaire stocké sur une base Exadata.

Cette exploitation est réalisée par la conception de nouveaux traitements Spark/Scala manipulant les données raffinées du DataLake avec des règles métiers décisionnelles.

Missions

Au sein de l'équipe projet Business Intelligence & Big Data, l'expert SPARK/SCALA aura les activités suivantes :

• Conception détaillée, rédaction de spécifications fonctionnelles générales et détaillées

• Développements SPARK / SCALA

• Contribution à la formalisation des plans de tests, exécution des tests unitaires et d'un premier niveau de tests d'intégration

• Résolution des anomalies pendant les phases d'intégration fonctionnelle et de recette utilisateur

• Packaging et déploiement en pre-production et production

• Optimisation des traitements afin de garantir la qualité de service standards du DWG

• Mise en œuvre des solutions industrielles et de réentrance permettant une reprise optimum des traitements en cas d'incident en production

• Mise en service et accompagnement au déploiement

• Suivi des environnements

Le consultant devra travailler en étroite collaboration avec le Chef de Projet, responsable du lot et l'équipe de développement du Programme.

️ Outils & Environnement

• GitLab

• Oracle

• Apache MESOS (souhaité)

• Technologies SPARK & SCALA (>5 ans d'expérience requise)

Conditions de travail

• Localisation : Paris

Exigences

1. Une expérience >5 ans sur des technologies SPARK & SCALA est nécessaire

2. Une connaissance de GitLab et d'Oracle est nécessaire

3. Une connaissance d'Apache MESOS est souhaitée

4. Une connaissance de contexte technologique similaire est un plus