Lead développeur / Data engineer - DGDDI
Cette offre a été pourvue !
Qui sont-ils ?
La Direction générale des douanes et droits indirects (DGDDI) : https://www.douane.gouv.fr/
Rattachée au Ministère de l’Économie, des Finances et de la Relance, la Douane française est une administration héritière d’une longue histoire. Elle est l’administration de la frontière et de la marchandise. Dans le cadre de ses missions de garde-frontières et de protection du territoire et du citoyen, la Douane est en prise directe avec les enjeux contemporains : accélération des échanges commerciaux, nouvelles technologies et nouvelles menaces (cybercriminalité, terrorisme).
Le poste est rattaché à la délégation à la stratégie, entité chargée de concevoir et d’animer, en lien avec les différentes entités de la direction générale et les autres administrations concernées, la stratégie de la Douane.
Rencontrez Jérôme, Directeur du projet VISIBY
Descriptif du poste
Le programme Valorisation des données à la Douane
Grâce à son programme de Valorisation des données, la Douane est à ce jour l’une des administrations les plus avancées en matière de big data, avec une équipe interne de science des données et de data-ingénieurs en forte croissance et appuyée par des ressources externalisées. Le programme a pour objectif d’accompagner et d’accélérer la transformation digitale de la Douane en mettant l’exploitation de la donnée au cœur de l’ensemble de ses missions : accompagnement des entreprises dans leurs opérations de dédouanement, lutte contre la fraude et fiscalité douanière, etc. Les transformations enclenchées par le projet concernent donc l’ensemble des métiers et fonctions de la Douane.
Par ailleurs, d’autres chantiers sont menés dans le cadre du programme, sous l’égide de l’administrateur des données :
- la construction d’une Stratégie des données et du modèle opérationnel associé ;
- la documentation des bases de données et des référentiels clés pour la douane ;
- un chantier d’acculturation et d’internalisation des compétences data.
La DGDDI ayant fait le choix de développer l’utilisation et la valorisation de ses données au bénéfice de tous les métiers de la douane, les scientifiques douaniers de la donnée travaillent de l’ensemble des services de la douane à travers la création d’un Pôle de Science des Données (PSDD). Ce pôle est placé sous l’autorité d’un chef du pôle des sciences des données.
Description du poste
Vos principales missions seront :
Etre le référent technique :
Maîtriser les principales technologies implémentées sur la plateforme BigData, notamment les aspects techniques des architectures distribuées
Être le référent technique du PSDD et fournir l’expertise (Python, Spark, Hadoop, SQL/NOSQL) nécessaire aux développements des applications Big Data
Développer les parties complexes du code, notamment les parties liées au Big Data Engineering (optimisation des pipelines de données massives)
Prendre en charge la résolution des problèmes techniques rencontrés par le PSDD
Garantir la qualité du codeSuperviser l’activité technique du PSDD :
Mettre en place la stratégie de tests techniques et veiller à leur réalisation, en collaboration avec la Sous-Direction des Systèmes d’Information et le centre informatique responsable du lac de données (DNSCE, Direction Nationale des Statistiques et du Commerce Extérieur)
Superviser et assurer le suivi technique des développements réalisés par les agents du PSDD et dans certains cas des prestataires externes
Coordonner la conception et la mise en œuvre techniques des projets de la phase d’émergence jusqu’à leur mise en production
Élaborer, superviser la rédaction et valider la documentation technique (dossiers d’architecture, d’installation et d’exploitation, etc.)
Veiller à l’existence et à l’exactitude de la documentation techniqueAccompagner les équipes métiers et le PSDD dans leurs travaux d’identification et expression des besoins, en :
analysant les contraintes et les prérequis techniques
recueillant et traitant les données pour les rendre exploitables par les Data Scientists (en liaison avec les data engineers du centre informatique chargé du lac de données)
optimisant la manipulation et le stockage des données
facilitant la portabilité des développements sur les différents environnementsAssister l’adjoint(e) du PSDD :
Dans la gestion des aspects coût/qualité/délai des projets
Dans la définition du plan de formation des agents du PSDD,
Contribuer à faire monter en compétences l’équipe du PSDD sur les aspects techniques des architectures distribuées, notamment en élaborant des supports de formation technique pour les agents du PSDD
Échanger régulièrement avec la SDSI et des équipes en charge de la Plateforme Big Data ; dans ce cadre participer aux PI Plannings et aux divers comités de suivi
Effectuer de la veille technologique.
Profil recherché
Savoirs-être:
Sens de l’écoute et disponibilité
Capacité de travail en équipeSavoirs:
Solides connaissances et expérience en science des données
Maitrise : Python, Spark, Hadoop, SQL/NOSQL
Connaissance : Java, Scala, C, Kafka, Kubernetes, Docker et méthodes AGILES (Scrum, SAFE …)Savoir-faire:
Expérience de travail transversal et mode processus.
Rigueur et sens de l’organisation
Pédagogie
Appétence pour le challenge technique / technologique
Déroulement des entretiens
PERSONNE A CONTACTER :
Christophe de Saint-Viance, administrateur directionnel des données
Tel : 01 57 53 49 00
mel : christophe.de-saint-viance@douane.finances.gouv.fr