Data Engineer Expert - Bagneux, France - FINESCA

FINESCA

Entreprise vérifiée

Bagneux, France

il y a 5 jours

Posté par:

Sophie Dupont

beBee Recruiter

Description

Principales missions
- Maîtrise des outils Databricks (création de jobs, cluster, notebook) et pouvoir requêter efficacement avec SQL
- Maintien en condition opérationnelle de la plateforme en production (analyse et correction d'incidents, de defects)
- Développement des jobs d'ingestion et transformation data Python avec Spark sur de gros volumes de données
- Fournir une vision long terme, tant opérationnelle qu'en terme de stratégie de plateforme data
- Accompagner et promouvoir les bonnes pratiques
- Participer aux ateliers de conception techniques et fonctionnels
- Rédaction et actualisation de la documentation technique

Compétences techniques recherchées dans l'ordre de priorité:

- MUST
- Python
- Spark
- Databricks
- SQL
- SHOULD
- AWS (S3, Glue, AirFlow, Cloudwatch, Lambda, IAM)
- COULD
- Big DATA
- WOULD
- GIT

Méthodologies:

- CI/CD avec Gitlab
- JIRA / Confluence
- Scrum