Requirements: French
Company: HIGHTEAM
Region: ile-de-france, france , le-de-France
Nous recherchons pour l?un de nos clients grands comptes dans l?Asset Management, un(e) Data Engineer confirm(e) matrisant les environnements Big Data on-premise, pour participer des projets de collecte, transformation et mise disposition de donnes destination des quipes mtiers et analytiques.Concevoir et dvelopper des pipelines d?ingestion batch et/ou streamMettre en place la collecte et la mise disposition de donnes travers API ou fichiersParticiper l?industrialisation et la mise en production des traitementsDvelopper des jobs Spark (Scala / PySpark) pour le prtraitement et le calcul des KPIImplmenter les collectes, mappings, traitements et restitutions de donnesTravailler en lien avec les quipes data science, BI et mtiersParticiper au suivi de projet, la gestion des pipelines CI/CD et l?administration des clusters HadoopExposer les donnes via API (Spring Boot) et DashboardParticiper la migration des donnes du systme legacy (Teradata) vers le data lake (via Kafka)Profil candidat:Nous recherchons un Data Engineer confirm (minimum 6 ans d''exprience) ayant une expertise avre dans le dveloppement de pipelines Big Data en environnement on-premise, avec une matrise des langages PySpark et Scala