
Data Engineer - Architecture de streaming data H/F
- Lille, Nord
- CDI
- Temps-plein
- Concevoir et développer des pipelines de données performants.
- Développer des solutions en utilisant des outils comme Scala, Spark, DBT.
- Implémenter des architectures de Streaming Data sur AWS (Lambda, Kinesis Stream, S3, Firehose, EMR Serverless, DynamoDB, etc.).
- Contribuer aux initiatives FinOps pour optimiser les coûts liés aux architectures Big Data.
- Développer et optimiser des traitements d'intégration de données en streaming, traitant plus de 100 To de données par jour.
- Participer à des projets innovants tels que :
- Systèmes de recommandation AI ;
- Feature Store ;
- Modernisation des flux financiers ;
- Plateforme de traitement des données CRM et usage ;
- Intégration de données pour partenaires stratégiques.