Dans un rayon autour de :

Data Engineer (Python / Docker / Spark) – H/F

Paris
45 000 - 65 000€ annuel
Data / BI / Machine Learning
Je postule !

Description du poste

Fondé en 2010, notre client est le leader européen de l’onboarding digital. Cette société propose un service SaaS pour digitaliser intégralement les dossiers d’ouverture de comptes bancaires (contrôle d’identité, gestion des pièces justificatives, signature des contrats) en conformité avec la loi tout en proposant des parcours fun aux consommateurs.

Des dizaines de milliers de comptes sont ouverts via la plateforme chaque jour. Le Data Engineer travaillera au sein de l’équipe Data, dont le but principal est de valoriser ce grand volume de données entrantes (dossiers, pièces justificatives, logs…).
L’équipe Data, équipe transverse à toutes les features teams, va être amenée à prendre un rôle plus central dans la génération de données anonymisées utilisées dans le cadre d’analyse.

Localisation : Paris 2ème
Télétravail : jusqu’à 60%
Rémunération : 45 000 – 60 000 Euros
Environnement technique : Python, Docker, Gitlab, Ansible, Pandas, Prefect, MongoDB…

Contexte du poste :

– Legacy : données que nous récupérons depuis un ElasticSearch dans un MongoDB, grâce à des ETL écrit en pandas et orchestrés avec Prefect, puis les données sont mises à disposition de Data Analystes via Tableau.
– Nouvelle plateforme : données événementielles dans Kafka, que nous récupérons via Kafka-Connect, transformons via Spark (pas de Scala, nous utilisons Pyspark) en orchestrant avec Airflow et stockons sur minio, et nous avons encore à sélectionner ce que sera notre outil de dashboarding, déploiement via des charts Helm sur un cluster Kubernetes on premise.

Au sein de l’équipe Data composée de 11 personnes, vous aurez les responsabilités suivantes :

– Création et orchestration de nos ETL, et de la stack associée.
– Participer à la définition des solutions retenues par notre architecte et à leur implémentation, et ensuite dans leur évolution.
– Participer à la maintenance de l’existant sur la plateforme historique.

Profil recherché

Votre profil :

– Vous disposez d’une expérience d’au moins 2 ans sur un poste similaire.
– Vous disposez d’une expérience sur des projets en production (tests, logs, versionning…).
– Vous savez travailler en méthode agile et êtes adepte de cette méthode.
– Vous maîtrisez Python 3, Docker, Git, Spark.
– Vous disposez de connaissances Airflow, Kafka, Minio, Vault.
– Vous avez déjà évolué sur du versionning d’environnement et sur du monitoring.

Les + :

– Un environnement de travail technophile et stimulant,
– Un partage de connaissances et de l’entraide en permanence entre les équipes,
– Une rémunération attractive avec des primes individuelles (en %),
– Un environnement de télétravail organisé et flexible,
– Matériel informatique (Mac ou Linux) + écran supplémentaire,
– Tickets restaurant,
– RTT.

Si ce poste vous intéresse, n’hésitez pas à postuler à cette annonce ou à contacter Maëlys Bernard pour toute question.

Vous connaissez un profil qui correspond à cette offre ?

Coopter
  • Déposer les fichiers ici ou
    Types de fichiers acceptés : pdf, doc, docx, odt, Taille max. des fichiers : 5 MB, Max. des fichiers : 1.
    • Pour connaître et exercer vos droits, consultez notre politique de confidentialité