Data Engineer - Paris, France - INSYCO

INSYCO

Entreprise vérifiée

Paris, France

il y a 1 semaine

Posté par:

Sophie Dupont

beBee Recruiter

Description

Nous recherchons pour notre client grand compte secteur médias un Data Engineer pouvant répondre à la mission ci-dessous.
- Argumentaire écrit répondant de façon ciblée au besoin
- CV à jour au format Word
- Date de prochaine disponibilité
- Tarif journalier
- Merci d?indiquer la référence DATA/4195 dans l?objet de votre mail
- CONTEXTE
- Dans le cadre du renforcement de l?équipe Data Business Process, notre Client recherche un data ingénieur qui sera amené à travailler sur la mise en oeuvre de plusieurs produits visant à faciliter la mise en qualité des données.

L?environnement de travail est sur le cloud AWS avec terraform en infra as code. Le périmètre d?intervention est axé sur les systèmes applicatifs autour de la gestion de la donnée et du traitement, et sur les plateformes Big Data, IoT, - PROFIL ATTENDU
- AWS (lambda, EMR, APIGateway, cognito...)
- Python
- PySpark
- TerraForm
- Git
- CI/CD
- SQL (PostgreSQL)
- Elasticsearch
- Snowflake
- Architecture orienté service /serverless
- Méthodologie Agile Scrum
- Bonne autonomie, force de proposition, rigoureux, forte réactivité
- Dynamique, excellent état d?esprit, bon relationnel
- Capable d?appréhender de nouveaux sujets techniques ainsi que des sujets métiers
- Respect des normes de sécurité
- Forte capacité à faire de la veille technologique
- LA PRESTATION ATTENDUE
- Garant de l?accès qualitatif aux sources de données
- S?assurer de la maîtrise de la donnée et est garant de la qualité de son utilisation (référencement, normalisation, et qualification) afin d?en faciliter l?exploitation par les équipes (Data Analysts et Data Scientists)
- Contribuer également à la définition de la politique de la donnée et à la structuration de son cycle de vie dans le respect des réglementations en vigueur, en collaboration avec le Chief Data Officer
- Assurer la supervision et l?intégration des données de diverse nature qui proviennent de ces sources multiples et vérifie la qualité des données qui entrent dans le Data Lake (il recette de la donnée, supprime les doublons, )
- QUALIFICATION ET GESTION DES DONNÉES
- Intégrer les éléments
- Structurer la donnée (sémantique, etc.)
- Cartographier les éléments à disposition
- Nettoyer la donnée (élimination des doublons...)
- Valider la donnée
- Éventuellement, créer le référentiel de données
- TRAVAUX / LISTE DES TACHES
- Ingestion et traitement des sources de données
- Préparation des données (transformation fonctionnelle et technique)
- Restittutions des données (Extractions, Reporting)
- Exposition des données (Elasticsearch, Snowflake)
- Elaboration / intégration des nouveaux traitements au niveau de la couche service (API)
- Préparation des package de livraison en Infra as code
- Gestion du cycle de livraison en production
- MCO
- Rédaction des documentations techniques