Nous recherchons un(e) Senior Data Engineer spécialisé(e) en Python, Pyspark, AWS, et data, pour rejoindre notre équipe dynamique. Vous jouerez un rôle clé dans la création, l'optimisation et l'amélioration des pipelines de données pour l'ingestion, l'enrichissement et l'exposition des données classifiées et transactionnelles sur AWS. Vous travaillerez directement sous la direction de notre Team Lead Data Engineer, qui organisera les tâches et assurera le bon déroulement du projet.

Les missions : 

• Optimisation du pipeline : Analyser et améliorer les pipelines de données existants pour optimiser les performances, la rentabilité et l’évolutivité.

• Transformation du pipeline : Transition des pipelines batch/snapshot vers des pipelines de gestion delta.

• Infrastructure as Code : Développer et maintenir des modules Terraform pour une gestion efficace de l’infrastructure sur AWS.

• Migration du pipeline : Migration des pipelines de données de Google Cloud Platform vers AWS en minimisant les interruptions et en garantissant une fiabilité élevée.

• Surveillance et alertes : Concevoir et mettre en œuvre des tableaux de bord et des systèmes d’alerte DataDog pour assurer une surveillance proactive des performances du pipeline de données.

• Veille technologique et innovation : Se tenir informé des nouvelles technologies et promouvoir activement les innovations et améliorations pertinentes au sein de l’équipe.

• Mentorat et soutien de l’équipe : Soutenir et guider les membres de l’équipe level junior, partager l’expertise et les bonnes pratiques, et contribuer à la croissance globale de l’équipe.

Compétences technique requises

• Une expérience pratique approfondie des services AWS, notamment S3, ECS, etc., et plus particulièrement Lambda et Glue

• Des compétences avancées en Python pour la manipulation de données, la création de scripts et le développement de pipelines.

• Une solide expérience dans la création de pipelines de données distribués et évolutifs avec PySpark.

• Une maîtrise de SQL pour l’interrogation et la transformation de grands ensembles de données.

• Une Expérience dans la création et la gestion d’infrastructures avec Terraform. Terragrunt est un atout.

• Une maîtrise de la configuration et de la maintenance de pipelines pour la prise en charge des workflows d’automatisation et de déploiement.

• Une connaissance de DataDog pour la surveillance, les alertes et la création de tableaux de bord.

Qualités recherchées :

• Autonome dans la gestion de projet, vous maîtrisez l'infrastructure de production et l'accès aux données.

• Votre esprit est ouvert à l'innovation et à l'amélioration continue.

• Pragmatique, vous trouvez des solutions concrètes et vous adaptez rapidement.

• Vous accordez une haute importance à la qualité du code et au respect des bonnes pratiques.

• Vous appréciez le travail d'équipe, communiquez ouvertement et offrez un support proactif.

• Vous assurez la qualité des tests et maintenez une approche axée sur le client.

Informations supplémentaires

✔ Ce que nous vous proposons :

Ravie de vous accueillir dans nos locaux au coeur de Paris (2 rue des Italiens 75009 Paris), vous y retrouverez :

🍎Notre restaurant d’entreprise, un grand espace de vie et des tickets restaurant avec “Restoflash” de 9,50€

👩‍🏫 Des formations (LinkedIn Learning...)

😎 16 jours de RTT, congés (exceptionnel et d'ancienneté);

🧘🏽‍♀️ Télétravail, crèches d'entreprise,CSE active...

et bien d'autres avantages ...

A propos d'Aviv :

Chez Aviv, nous respectons l'égalité des chances. Nous encourageons vivement les personnes souffrant de handicaps visibles et non visibles, tous les niveaux d'éducation, les personnes issues de minorités, les membres de la communauté LGBTQIA+, les parents et les soignants à postuler. Si vous avez besoin d'ajustements raisonnables à tout moment de la procédure de candidature ou d'entretien, ou si vous souhaitez discuter de vos besoins en matière de temps partiel ou de travail flexible, veuillez nous le faire savoir.

Dans votre candidature, n'hésitez pas à indiquer les pronoms que vous utilisez.

Notre ambition est d'être le premier employeur dans le domaine de la PropTech en Europe. 

C'est le moment idéal pour nous rejoindre et trouver l'emploi idéal !