- Design, develop, test, promote and industrialize all data components from data ingestion to datawarehouse delivery (ClickHouse, BigQuery):
- Propose and develop innovative solutions to achieve the best levels of scalability and performance for our Big Data engines
- Automate and streamline our real-time and batch data pipelines (on-premise and in the cloud) in order to simplify access to our data by other teams and lower amount of work spent by other teams on ETL processes
- Perform end-to-end monitoring to ensure high availability of production data processing, data quality and reliability
- Apply best in class Devops guidelines and secure deployments
- Brainstorm with other team members working on our data backend (datawarehouse modelling and data exposure through our reporting APIs) on optimizing our architecture and support them in the use of our pipelines
- Contribute to data roadmap definition in coordination with other R&D and product teams in order to build a best in class data infrastructure that will generate insights for Equativ's analytics
- Take part in improving and deploy data engineering standards, procedures, processes and operational guidelines around target data components at Equativ
- Master degree in Computer Science or similar technical field of study
- 3+ years of software development with open source technologies
- Fluent in Java and/or in Scala. SQL mastery
- Very good understanding of Devops principles (Gitlab, Docker, Kubernetes, Gradle, ci/cd)
- Experience with large-scale data engineering technologies (ClickHouse, Flink, Kafka, Hadoop, Spark, Hbase)
- Experience on building data pipelines on Google Cloud Platform (BigQuery, Dataflow, GCS, Cloud Run, Airflow ...) would be a big plus
- Experience in working with high QPS Rest APIs is a plus
- Entrepreneurial spirit and know-how to identify opportunities of improvement
- Working proficiency and communication skills in verbal and written English
- Passion for playing with large volume of data
- You'll be just finishing your onboarding
- You'll probably have tackled a few small tasks in peer-coding
- You'll have an overview of 50% of the stack, CI/CD and team's main processes. You'll be able to work on more complex developments
- You'll now have enough knowledge to participate to deployments of chosen applications
- You'll be autonomous on most of our stack and will have participated to major projects
- You'll be helping the team on production matters
-
Senior Data Engineer
il y a 2 semaines
Continuity Parisot, , FranceLa colonne vertébrale de notre solution est un pipeline de data et de ML qui permet d'enrichir chaque dossier analysé avec des données externes, de qualifier le risque (activité, adresse, bâtiment, situation financière, historique de sinistre) pour répondre à deux questions simpl ...
-
Senior Engineer, Data Engineering
il y a 6 jours
ALFI : Financial Markets Consultancy Services Parisot, , FranceLe Data Engineer intervient au sein de l'équipe Engineering Open Big Data du Département Guilde Data, qui regroupe l'ensemble des expertises technologiques liées à l'ingénierie de la donnée, de l'automatisation et à l'exploitation des modèles de Machine Learning. · Votre rôle et ...
-
Software Engineer #Python #Data
il y a 6 jours
Groupe Les Echos-Le Parisien Parisot, , FranceLe Groupe Les Echos - Le Parisien s'adresse chaque mois à 25 millions de Français. Presse quotidienne généraliste : Information financière : Investir, Boursier.Services aux entreprises : brand content, dématérialisation, formation · Sa raison d'être exprime l'ambition de favoris ...
-
Data Engineer Cloud Azure F/H
il y a 3 semaines
SOFTEAM Parisot, , FranceVous évoluez dans le domaine de la Data et souhaitez intégrer un leader de la transformation numérique spécialisé dans les secteurs de la Banque, du Luxe, de l'Assurance, de la Finance, de l'Energie et la possibilité d'évoluer au sein du Groupe Docaposte · Softeam est labellisé ...
-
Data Engineer
il y a 1 semaine
emagine Consulting Toulouse, Franceemagine recherche pour son client final grand compte, un(e) Data Engineer. · Lieu : Toulouse · Démarrage : Début Juin · Conditions : Full remote - 1 à 2 jours/mois sur site · La mission consiste à piloter la partie Data du projet de migration du SI Catering. La mission sera centr ...
-
Data Engineer
il y a 6 jours
Pictarine Toulouse, France À temps pleinMission and challenges Si tu es enthousiaste à embarquer dans la nouvelle équipe data de Pictarine pour la faire rayonner avec tout ton savoir-faire, alors c'est l'aventure qu'il te faut · Avec plus de 1K tables, 2M de clients et 4M de commandes en 2022, les équipes de Pictarine ...
-
Data Engineer
il y a 3 semaines
LeHibou Toulouse, France FreelanceNotre client dans le secteur Transport et logistique recherche un Data Engineer Confirmé H/FDescriptif de la mission:Dans le cadre de l'un de ses projets, notre client souhaite faire appel à un Freelance expérimenté sur la Data. · Vous serez intégré au sein d'une équipe 13 person ...
-
Data Engineer
il y a 6 jours
CGI France Toulouse, FranceBig Data, Data Science, Data analyse, Data architecture, ... Que vous commenciez votre carrière professionnelle ou que vous soyez spécialiste de l'une de ces disciplines, intégrer notre communauté Data, c'est l'assurance de progresser, innover, partager, vous certifier et rendre ...
-
Data & AI Engineer
il y a 6 jours
Capgemini Toulouse, FranceShort Description · Capgemini Engineering, leader mondial des services d'ingénierie, rassemble des équipes d'ingénieurs, de scientifiques et d'architectes pour aider les entreprises les plus innovantes dans le monde à libérer leur potentiel. Des voitures autonomes aux robots qui ...
-
Lead Engineer/Data Engineer
il y a 1 semaine
Ippon Technologies Toulouse, FranceIppon, c'est l'énergie du collectif au service de la technologie · Nous sommes un cabinet de conseil et d'expertise technique. · Nos équipes ont pour leitmotive de transformer des idées innovantes en solutions logicielles de haute qualité avec un focus particulier sur la valeur ...
-
Lead Engineer/Data Engineer
il y a 1 semaine
Ippon Technologies Toulouse, FranceIppon, c'est l'énergie du collectif au service de la technologie · Nous sommes un cabinet de conseil et d'expertise technique. · Nos équipes ont pour leitmotive de transformer des idées innovantes en solutions logicielles de haute qualité avec un focus particulier sur la valeur ...
-
Data Engineer Cloud Data
il y a 2 jours
CGI Toulouse, France CDI· Poste : Big Data, Data Science, Data analyse, Data architecture, ... Ça n'a pas de secret pour vous ? · Que vous commenciez votre carrière professionnelle ou que vous soyez spécialiste de l'une de ces disciplines, intégrer notre communauté Data, c'est l'assurance de progresser ...
-
Lead Data Engineer
il y a 1 semaine
Ippon Technologies Toulouse, FranceQui sommes-nous ? · Ippon, c'est l'énergie du collectif au service de la technologie · Nous sommes un cabinet de conseil et d'expertise technique. · Nos équipes ont pour leitmotive de transformer des idées innovantes en solutions logicielles de haute qualité avec un focus partic ...
-
Data Engineer Cloud
il y a 1 semaine
VISEO Toulouse, France CDIRejoignez VISEO et explorez un univers de possibilités où l'Humain, le Collectif et le Challenge sont au cœur de notre ADN. · Qui êtes-vous ? · Si pour vous être Data Engineer Cloud Azure Confirmé F/H , c'est : · Faire partie d'une communauté d'experts en ingénierie des donnée ...
-
Data Engineer Expérimenté
il y a 1 semaine
CS GROUP Toulouse, France À temps pleindu poste · Nous recrutons un.e Ingénieur Data Engineer pour rejoindre notre Business Unit INDUSTRIE au sein de la Business Line Data Intelligence. Elle accompagne nos clients dans leurs problématiques associées à la transformation digitale. Nos offres se déclinent autour de la da ...
-
Data Engineer Expérimenté
il y a 1 semaine
CS GROUP Toulouse, France À temps pleinDescription de l'entreprise · La mission de CS GROUP : être à la pointe des technologies pour garantir la sécurité de tous dans un monde en pleine mutation. L'expertise reconnue du groupe lui permet d'intervenir là où les enjeux sont les plus critiques : aéronautique, défense, én ...
-
Data Engineer Cloud Data
il y a 1 semaine
CGI Toulouse, France À temps pleinQuelles sont les missions ? · Big Data, Data Science, Data analyse, Data architecture, ... Ça n'a pas de secret pour vous ? · Que vous commenciez votre carrière professionnelle ou que vous soyez spécialiste de l'une de ces disciplines, intégrer notre communauté Data, c'est l'assu ...
-
Data Engineer Expérimenté
il y a 1 semaine
Capgemini Toulouse, FranceCapgemini en quelques mots · Choisir Capgemini, c'est choisir une entreprise où vous serez en mesure de façonner votre carrière selon vos aspirations, où vous serez soutenu et inspiré par une communauté d'experts dans le monde entier, où vous pourrez réécrire votre futur. Rejoign ...
-
Data Engineer Expérimenté
il y a 1 semaine
Capgemini Toulouse, FranceCapgemini en quelques mots · Choisir Capgemini, c'est choisir une entreprise où vous serez en mesure de façonner votre carrière selon vos aspirations, où vous serez soutenu et inspiré par une communauté d'experts dans le monde entier, où vous pourrez réécrire votre futur. Rejoig ...
-
Data Engineer Palantir
il y a 2 jours
Capgemini Toulouse, FranceCapgemini en quelques mots · Choisir Capgemini, c'est choisir une entreprise où vous serez en mesure de façonner votre carrière selon vos aspirations, où vous serez soutenu et inspiré par une communauté d'experts dans le monde entier, où vous pourrez réécrire votre futur. Rejoign ...
Data Engineer - Parisot, , France - Equativ
Description
About the team
At Equativ, we're on a mission to develop advertising technologies that empower our customers to reach their digital business goals. This means that we rely on massively scalable, widely distributed, highly available, and efficient software systems; the platform deals with over 100 billions requests per day and above 40 Gbps of network traffic.
Our innovation team based in Paris, Nantes, Limoges, Kraków and Berlin is composed of 90 straightforward and energetic engineers working in an Agile environment and ready to tackle the most complex technical challenges.
Our data engineering team is composed of 10 skilled engineers and is based in Paris. We are part of the R&D department which is composed of 140+ engineers spread across Paris, Nantes, Limoges, Kraków and Berlin all working in an Agile environment and ready to tackle the most complex technical challenges.
Our mission
Data Engineering team is central to Equativ's data centric business and is responsible to ingest, transform, model and redistribute all data coming from our adtech platform.
We aim at building scalable and robust Big Data platforms from ingestion to business actionable consumption. Our Big Data ecosystem must handle massive log ingestion (tens of billions per day), short & long term data storage, complex data modelling, real-time and batch ELT as well as providing external access through dedicated APIs.
Data Engineers serve Equativ data directly to our customers and throughout the company whether it is for BI analysis, data science algorithms (clustering and optimization), customer reporting, invoicing and more.
Equativ Data Engineering team is engaged in an ambitious migration of its main data stack (Hadoop on-premise) to GCP with the objective to increase reporting features, lower maintenance time, improve performances and simplify the access to our raw data.
What you'll do
As a Big Data Engineer, you'll primarily focus on maintaining and enhancing the operationality of our on-premise and cloud data pipelines which feed our warehouses and APIs
About you
Within 1 month
Within 4 months
Within 9 months
About us
Equativ is the new single name for Smart Adserver, DynAdmic, LiquidM and Nowtilus — four proven innovators in advertising technology. The vertically integrated company provides brand and privacy-safe solutions that empower its clients to achieve maximum impact while respecting the rights of consumers. The union combines client expertise and engineering excellence to serve the interests of both the supply- side and demand-side with equal professionalism and technical sophistication.
Headquartered in Paris and New York, Equativ operates globally with a team of more than 550 people in 20 offices. Equativ offers the market its own independent ad server, SSP, buyer tools, and media services to fulfill the promise of advertising technology. Learn .
The company is ranked on the Deloitte Technology Fast 500 EMEA and in the Financial Times' FT 1000: Europe's Fastest-Growing Companies.
Equativ (formerly Smart AdServer) has been awarded the label and is proud to be among the best companies in the ChooseMyCompany ranking, recognized for its flexible working environment.
Come and lead the charge with us in building a transparent ecosystem based on quality