
STAGE] - DATA Engineer F/H
- Palaiseau, Essonne
- Stage
- Temps-plein
- Faire partie des entreprises ayant obtenu la certification Great Place to Work.
- 33% de notre chiffre d'affaires issu de missions contribuant à réduire l'impact environnemental de nos clients (GreenTrust).
- La réduction de 15% de notre empreinte carbone.
- Au sein de l'entité Socotec Monitoring France (20%), vous participerez à la définition de la stratégie optimale de données pour Socotec Monitoring (structuration, processus, open data, achats de données externes)
- Pour le compte du groupe Socotec (80%), vous participez à la construction du Data Lake à l'échelle monde. Votre objectif sera de développer les flux de donner pour leur analyse en lien avec les équipes BI et Data Science. Vous apprendrez à organiser et ordonnancer les flux d'extraction, de transformation et de chargement des données en garantissant leur fiabilité, leur disponibilité, etc.
- Amazon Web Services (AWS)
- Apache Airflow comme ordonnanceur
- Spark pour les pipelines ETL
- Gitlab pour versionner les sources
- Kubernetes
- DeltaLake
- S3
- Gérer les metadata avec OpenMetadata
- Power BI, l'outil de BI, géré avec les équipes BI
Vous aurez la possibilité d'interagir à l'international (US, UK, ITA, ESP, NL) et des opportunités de mobilité internationale sont possibles.Vous ferez preuve d'autonomie, de sagacité et de qualités certaines dans la rédaction et la communication de son code. L'offre peut déboucher sur un CDI à la fin du stage.Qualifications
- Master en Big Data ou diplôme d'ingénieur en informatique avec une forte appétence pour la data
- Maîtrise des bases de données SQL et NoSQL, ainsi que des concepts associés
- Connaissance de la stack Big Data (Airflow, Spark, Hadoop)
- Expérience avec les outils collaboratifs de développement (Git, GitLab, Jupyter Notebooks, etc.)
- Connaissance appréciée des services AWS (Lambda, EMR, S3)
- Intérêt marqué pour les technologies innovantes
- Esprit d'équipe
- Anglais courant, y compris un bon niveau technique
Vous prendrez part à des projets captivants et de grande envergure où vous aurez un vrai
rôle à jouer !Vous vous engagez sur la charte des valeurs qui font le socle de la société :
- Cohésion & Dynamisme
- Performance & Qualité
- Innovation & Excellence Technique