En tant que Data engineer Navitia, vous êtes intégré à une équipe pluridisciplinaire mêlant développeurs, Product Owner et Architectes dont l’objectif est de mettre en place un système de collecte, agrégation, mise en qualité de données pour les services d’information voyageur (itinéraires, horaires à l’arrêt, perturbations, etc.). Les données manipulées sont très variées (OpenStreetMap, GTFS de Paris, de New-York ou d’Accra, vélo en libre services, etc.) et nécessitent des contrôles et des traitements très spécifiques ; et de mélanger ces données avec des centaines de flux temps réel par seconde pour finalement les intégrer dans nos systèmes et ainsi répondre aux 15 milliards de requêtes annuelles. Et surtout, ne jamais avoir pas peur ™.

Avec cette équipe, vous assurerez les missions suivantes :

• Participer à la création et à l’évolution du moteur d’ingestion et de mise en qualité des donné
• Analyser et comprendre les besoins clients avec les Product managers et/ou les Business Owners
• Concevoir techniquement la solution en collaboration avec les architectes, SRE, métier…
• Superviser et monitorer le déploiement et la robustesse des composants mis en production
• Participer activement à la qualité de l’ingénierie logicielle (Relecture de code, test, intégration continue, déploiement, etc.)
• Chiffrage des demandes d’évolution

• Le Rust vous passionne, python ne vous fait pas peur, et le Go vous inspire
• Vous êtes familier avec les problématiques liées au contexte multi-threads
• Vous avez déjà travaillé avec un pubSub (kafka/kinesis) et un système de Queue tel que RabbitMQ
• Vous êtes curieux des nouvelles technos et aimez partager ce que vous découvrez, tout en sachant que tout réécrire n’est pas toujours une bonne idée
• Vous êtes motivé à partager votre code source sur GitHub et à participer à l’aventure Open Source Navitia
• Vous avez une certaine culture de la mesure, de la métrologie du code et de son fonctionnement
• Anglais professionnel
• Vous êtes pragmatique : la bonne techno pour répondre au besoin, ni plus, ni moins.
• Vous êtes responsable : Vous vous engagez sur un chiffrage, vous le respectez
• Vous justifiez d’une expérience d’au moins. 2 ans sur un poste similaire

Vous maîtrisez :

• Linux
• Rust, Go, Python
• Apache Spark, PubSub & Queue…
• Cloud Public (AWS…)
• Git, SonarQube, Jenkins
• Docker, Kubernetes

Partagez avec nous votre Github, nous vous donnons le nôtre : https://github.com/CanalTP/navitia pour l’information voyageur, et https://github.com/CanalTP/transit_model/ pour la manipulation du modèle de données !