MP DATA, recrute un Data Engineer expert de la stack technique AWS afin de travailler sur un projet impactant de sur la data platform d’un client, acteur majeur du secteur transport.

Vos missions seront les suivantes:

En collaboration avec l’architecte data, les experts data et le gestionnaire/propriétaire produit, vous serez amené à participer aux opérations et à l’implémentation de la roadmap technique de la plateforme d’orchestration basé sur le produit Airflow. Ainsi vous assurerez le développement et le support expert des fonctionnalités de la plateforme en elle-même mais aussi de l’outillage DevOps autour du produit dont en priorité, l’observabilité, la gestion de la performance et l’amélioration continue du service Orchestration

Participer au cycle de développement du produit Airflow

• Assurer l’implémentation/développement de l’outillage et des fonctionnalités de la plateforme nécessaires avec accord de l’Architecte Data et les experts Data du groupe.

• Contribuer au développement des graphes orientés acycliques (DAG) nécessaires à la bonne opérabilité des plateformes datalake et datamart (AWS et Snowflake)

• Assurer le rôle de support technique auprès des end-users lors de leur usage de la plateforme.

• Assurer les livraisons et déploiement du code.

Assurer le run de la plateforme

• Support niveau 2 expertise de la production et participation aux situations de crises.

• Contribution à la Knowledge Base du produit.

• Reporter au gestionnaire de la plateforme Airflow, les performances IT, l’état de santé temps réel et principaux risques opérationnels de la plateforme.

Contribuer à la communauté Data Orchestration

• Assurer le relais (Key User) auprès des équipes utilisatrices de la plateforme : BI, projets métiers, Data Science, DataLake, etc …

• Participer aux points réguliers avec les utilisateurs afin d’échanger autour des bonnes pratiques d’usage et de développement.

Passage de connaissance à l’équipe de support off-shore.

• Produire la documentation nécessaire à ce passage de connaissance : tuto, document d’exploitation, etc…

• Assurer et animer les sessions de transfert de connaissances au travers de démos produit

• Accompagner les premiers développements de l’équipe de support

• Aider l’équipe de support lors de la résolution d’incidents/problèmes

De formation Bac+5 (ou plus) en développement informatique / data engineering, vous justifiez de plusieurs expériences professionnelles au cours desquelles vous avez pu développer les connaissances suivantes :

• Méthodologie Agile Scrum/Kanban

• Connaissance de l’écosystème de la gestion de données (profil Data Engineer)

• Notions DEVOPS

• Notions d’observabilité des Systèmes d’Information

• Soft skills : Force de proposition, Autonome, Dynamisme, Fédérateur / Communiquant (serait un plus)

Connaissance des outils suivants :

• Airflow (obligatoire) : Orchestration des processus

• AWS

• Snowflake

• dbt : Principes ETL/ELT

• JIRA/Confluence

• Jenkins

• Gitlab

• Terraform

• Kubernetes/Containers

• Elasticsearch / Kibana (serait un plus)

Type d’emploi : Temps plein, CDI.

1 entretien RH -> 1 entretien technique -> 1 entretien dans les locaux