Consultant Data Engineer Databricks - Greater Paris Metropolitan Region - Pulsover

Description

Chez Pulsover, cabinet de conseil spécialisé dans la data, le cloud, le delivery de projets, partenaire d'AWS et de Databricks, nous accompagnons nos clients à atteindre leurs objectifs de transformations digitales.

Notre approche : conjuguer expertise projet, rigueur et valeurs humaines .

Rejoindre Pulsover, c'est intégrer une équipe bienveillante qui mise sur votre développement autant que sur votre expertise .

Vous cherchez des défis professionnels stimulants et une émulation d'équipe?

Rejoignez-nous .

Nous renforçons notre équipe pour accompagner notre Client sur l'évolution de sa Data Platform vers un modèle centralisé, multi-pays, avec des enjeux forts de migration Unity Catalog, d'industrialisation, et d'optimisation des environnements Databricks (AWS).

Vos missions principales : concevoir et optimiser des pipelines de données sur Databricks, contibuer à la migration Unity Catalog, garantir la performance et la fiabilité des traitements data dans un environnement cloud AWS.

Votre rôle :

- Développement & maintenance des pipelines : développer des jobs Spark/Databricks (ingestion, transformation, synchronisation) et gérer des dataflows complexes multi-collections avec validation et documentation rigoureuses.

- Migration Unity Catalog & gouvernance : contibuer à l'inventaire et la migration des tables vers Unity Catalog, mettre en place le modèle de gouvernance (permissions, ownership, lineage) et standardiser les environnements.

- Optimisation Databricks & performance : optimiser clusters, init scripts, policies et CI/CD. Réduire les coûts compute et améliorer la stabilité en investigant les problèmes de permissions, ACL et networking.

- Intégration cloud AWS : gérer les workloads Databricks sur AWS (compute, IAM, monitoring), participer aux déploiements multi-pays et exploiter les données AWS pour analyser l'impact des optimisations.

- Support & collaboration : challenger le besoin client, assurer le support technique auprès des équipes internes/clients, présenter les choix techniques en réunion et collaborer avec les équipes data, cloud, sécurité et BI.

Compétences techniques recherchées :

Stack : Databricks (Spark, Jobs, Clusters), AWS (IAM, compute, monitoring), Unity Catalog, PySpark, SQL avancé, CI/CD

Profil recherché :

• 3+ ans d'expérience en data engineering avec maîtrise Databricks/Spark et expérience AWS.
• Solide expérience sur des pipelines volumétriques
• Capacité à intervenir sur des environnements complexes (gouvernance, performance, réseau).
• Capacité à challenger et reformuler les besoins
• Autonomie et ownership
• Communication claire et structurée
• Travail efficace en équipe multi-compétences

Pourquoi rejoindre Pulsover ?

Des missions à forte valeur ajoutée auprès de grands comptes et d'acteurs innovants

Un environnement bienveillant, collaboratif et stimulant

Un accompagnement personnalisé dans votre montée en compétences et votre évolution de carrière

Des formations pour rester à la pointe des pratiques en gestion de projet

Un package compétitif assorti de nombreux avantages sociaux.

Rejoignez l'aventure Pulsover et participez à des projets qui font la différence