Data engineer big data

Tâches : Participer à la définition de l'architecture Data (en lien avec les architectes et la Squad)

Affiner et Développer les solutions de collecte et de stockage des données (provenant de multiples sources) afin de le rendre disponibles pour les usages métiers

Mettre en oeuvre les tests unitaires et automatisés

Déployer le produit dans les différents environnements

Garantir le bon fonctionnement du produit en production et assurer le suivi / l'assistance / la gestion des incidents

Accompagner l'évolution des pratiques de l'équipe dans une logique d'amélioration continue de la qualité du code Vous serez ainsi amené à travailler pour le compte de différentes Squads avec des interlocuteurs possiblement changeants.

Vous serez également amené à échanger avec les autres membres du Chapitre du site de Paris mais aussi ceux des autres sites France.

Attendu : Activité Big Data de Data Engineer (collecte, stockage et manipulation de données) 2 - Etre force de proposition et expertise sur l'exploitation de la données, et sur les techno manipulées/solutions utilisées

Apprécié : Profil recherché

Compétences techniques : Framework Big Data & Langage : Spark - spark streaming et batch (requis) ,

SQL (requis)

Kafka (apprécié) java (apprécié) scala (apprécié) shell (apprécié)

Ecosystème Big Data : Stack Hadoop Cloudera (fortement apprécié)

Base de données : (type Hdfs, Hive, Hbase, Phoenix, MongoDB)

DEVOPS : GIT, Jenkins, Artifactory, XL Release, ELK, Grafana Apprécié : Outil de Data Visualisation : Microstrategy étant un plus (ou connaissance Power Bi, Tableau)

Compétences humaines : Requis : Autonomie,

Adaptabilité,

Bonne communication / Pédagogue / Vulgarisation Data pour des équipes métiers

Force de proposition,

Sait challenger les besoins et comprend le sens métier des travaux menés5 à 10 ans d'exp.

Paris 12ème3 jours sur site