Dans le cadre du renforcement de sa capacité de support en production N2, notre client recherche un·e Ingénieur·e de Production Big Data passionné·e par l’exploitation de plateformes distribuées à grande échelle.
L’équipe est responsable du maintien en condition opérationnelle et de l’évolution d’un écosystème Big Data qui repose sur Kubernetes (IKS) et prochainement OpenShift, avec les briques suivantes :
Apache Spark
Apache Airflow / Astronomer
Starburst (Trino)
Missions :
En rejoignant l’équipe, vous interviendrez au cœur de la production Big Data et serez garant·e de la fiabilité des plateformes. Vos missions principales :
Assurer le support N2 en production
Analyser les root causes et piloter les résolutions
Optimiser les traitements distribués : tuning Spark sur Kubernetes
Améliorer l’orchestration Airflow et la gestion des catalogues Starburst.
Accompagner les équipes métiers pour un usage efficace et sécurisé des plateformes.
Contribuer à la documentation, à l’industrialisation et à l’amélioration continue des pratiques d’exploitation.
Vous êtes à l’aise dans un environnement Big Data distribué et aimez mettre les mains dans le cambouis en prod.
Expérience confirmée en exploitation / production DATA.
Maîtrise d’au moins 2 technos parmi : Spark, Airflow, Starburst, Kubernetes.
Compétences en support Kubernetes
Solide expérience en observabilité & monitoring
Connaissances en tuning Spark (gestion ressources, profiling applicatif).
Capacité à documenter procédures et diagnostics.
Bonus : scripting (Python, Bash, Ansible), CI/CD (Git, Jenkins, GitLab CI), gestion des secrets (Hashicorp Vault, PKI).
Langues : Français courant, Anglais professionnel.
Un premier entretien RH avec Meriem, Céline ou Jean-François
Un Second Entretien technique avec notre directeur technique
Un dernier entretien avec le président de la société
Rencontrez Claire, Data Ingenieur
Rencontrez Amar, CTO
Ces entreprises recrutent aussi au poste de “Données/Business Intelligence”.