
Data Engineer AWS (H/F)
- Paris
- CDI
- Temps-plein
- Développement de jobs d'ingestion et de transformation de données.
- Contribuer à la conception de outils de traitement BigData (Ingestion / Traitement / Analyse).
- Cadrage technique des besoins émis par les consommateurs de la plateforme Data.
- Garant de la mise en production des traitements au sein de la plateforme.
- Optimisation du code et de la capacité des VMs mise en œuvre pour chaque traitement.
- Garantit la disponibilité et l'outillage pour les équipes métier, ainsi qu'aux utilisateurs de la plateforme (data scientists / data analystes / data engineer).
- Relation avec les équipes infrastructure afin d'assurer le cadrage et le déploiement des solutions valides.
- Analyse d'anomalie et proposition solution court / moyen terme
- Développement sous Databricks (Python / SQL / Spark / Airflow)
- Réalisation de tests unitaires et tests de masse.
- Assurer le suivi de la production, et assurer la correction des incidents opérationnels.
- Documenter et partager la connaissance avec toute l'équipe (présenter les avancées et les réalisations).
- Maîtrise de Python, Spark, et des environnements Amazon AWS, AirFlow et Databricks.
- Expérience de travail dans un environnement Big Data.
- Connaissance des méthodologies Agile, idéalement SFAe.
- Minimum 4 ans d'expérience dans le développement de projets Data.