Data Engineer Awsf/h - Paris e, France - Digital Partners

Digital Partners

Entreprise vérifiée

Paris e, France

il y a 1 semaine

Posté par:

Sophie Dupont

beBee Recruiter

Description

Jeune entreprise innovante, Digital Partners a pour ambition de devenir un acteur incontournable du digital, et ce dans l'ensemble de ses marchés.

Digital Partners intervient en transformation digitale, efficience opérationnelle et data analytics auprès de sociétés de tous secteurs d'activité.

**Vos missions ?**

Dans le cadre du développement de notre activité nous recrutons un.e** Data Engineer F/H.**

**Contexte**:
Création d'une équipe Data dans l'objectif d'accompagner les équipes du train dans la construction de leurs Data Set pour des finalités de consolidation de reporting.

**Environnement technique**: AWS

**Vos missions?**

Rédaction de scripts AWS Glue pour:

- Acquisition des données brutes (Get raw data) & dépôt des données dans une base de stockage de données brutes ( Bucket S3, base RDS, etc.)
- Transformation des données brutes (Transform Raw data) et dépôt des données dans une base de stockage de données transformées (calculs, anonymisations des données, normalisation, etc.) travail de modélisation est nécessaire pour le traitement des données
- Conversion de données au format attendu par le métier
- Lancer AWS glue crawler et observer les tables créer dans « Glue Data Catalog »
- Rédaction des requêtes Athéna pour exploiter les tables
- Monitoring des métriques liés aux scripts sur Datadog

**Votre Profil?**

Diplômé d'un Bac + 4/5 ( école d'ingénieur ou master ) vous avez au moins 7 ans d'expérience dont au moins 3 en tant que data engineer sur AWS : Glue, Athena, Glue Catalogue, S3, RDS, Lamba. Vous avez également des compétences en langage pySpark.