Architecte big data

Socle Développement, Architecture logicielle, Centre d'expertise des performances et DBAs&Socles.

Les principales missions de ce service consistent d'une part, à accompagner les équipes dans la définition d'architecture Techniques, la conception des modèles de données, à administrer les bases et les moteurs de bases de données et à construire les socles SGBD, décisionnel et Bigdata.

Les missions :

• Maintient en condition opérationnelle des socles Hadoop Cloudera Hors-Prod et Prod ;
• Pilotage et mise en oeuvre opérationnelle des travaux de fiabilisation et de stablisation des socles Hadoop pour limiter les incidents récurrents et acrroître la disponibilté pour les utilisateurs ;
• Mise en place et rédaction de procédures d'administration et d'exploitation ;
• Intégration avec l'outillage de l'écosysteme DSI Agirc-Arrco : ordonnanceur IWS, sauvegarde HDPS, supervision Prometheus / Grafana,
• Capacity planning et performance :
• Suivre le consommé des ressources infra : stockage, cpu,
• Mise en place de l'outillage et des procédures nécessaires pour assurer le suivi ;
• Evolution des architectures techniques :
• Mise en place opérationnelle des principes de sécurité : outillage, procédures, reporting ;
• Vérification de la bonne application des normes et des standards ;
• Force de proposition, étude et analyse des solutions d'évolutions : outillage utilisateurs, optimisation des performances,

Vous justifiez de 5 ans d'expériences sur un poste similaire.

Vous maitrisez les technos suivantes :

• Distribution HADOOP
• Langages de scripting et de développement : Shelle, Python, Spark
• Système d'exploitation Linux
• Moteur de requetage : SQL, Hive, Impala

• Pilotage de organisation d'activité projet
• Capacité rédactionnelles : documentation technique, cahier des charges, communication et compte rendu
• Capacités relationnelles, écrites et orales