Data engineer
Détails
Informations
La Tribu DATA construit et développe des applications sur la base de puissantes plates-formes DATA à des fins d'usages variés servant toutes les directions métier de la banque.
Pour répondre à ces usages, la tribu est au coeur de la stratégie data, et intervient aussi bien au niveau de l'architecture Data, sur les dernières technologies data, Big data (Cloudera CDP) , IA (Dataiku) , Teradata, SAS, ainsi que sur les solutions analytiques et de datavisualisation.
La mission consistera à participer aux chantiers de modernisation technologique de la plate-formes Data. Les principales activités seront :
- La montée en compétences sur l'éco-système Cloudera (CDP) avec la compréhension technique de l'ensemble des uses cases du patrimoine.
- La réalisation, avec le support de l'architecte technique et des TechLead Big Data, des travaux de montée de version CDP et de migrations applicatives quand c'est nécessaire :
- Participer au cadrage et à la préparation des environnements cibles.
- Réalisation de la migration des applications en environnements Hors Prod.
- Test et validations : tests unitaires, testes d'intégration, tests de performances. Accompagnement de la validation métiers.
- Bascule et MEP : plan de bascule, synchronisation, MES, monitoring cible.
- Assurer la période de garantie post migration.
- La participation à la mise en place du nouveau Data Hub LCL qui sera sur une
Spark, SQL, traitements batch distribués, notions Parquet / Iceberg
Compréhension des jobs Spark sur Kubernetes
Profil recherché
Spark, SQL, traitements batch distribués, notions Parquet / Iceberg
Compréhension des jobs Spark sur Kubernetes
Teradata sql assistant ou Teradata Studio ; datastage ; Mega
Jir@; Confluence