Le ou la data engineer a pour mission de maintenir toujours à jour l’ensemble des données socle indispensables au fonctionnement de l’IA : données de marché, plans locaux d’urbanisme, cadastre, bâtiments, topographie … Il ou elle est en veille sur la parution de nouvelles données en open data et force de proposition sur les traitements à effectuer. Au sein de l’équipe data, il ou elle est le binôme de l’engineering manager en charge de la production des données réglementaires.

Missions

Arbitrages et vision architecturale : formalisation et actualisation du modèle conceptuel de données utilisé, graphe des dépendances fonctionnelles, et interactions régulières avec les développeurs et product owners pour l’évolution du modèle.

Maintenance des données contextuelles et client : suivi et automatisation (Dagster) des mises à jour des bases de données nationales issues de sites open data (Openstreetmap, SITADEL, SIRENE, DVF, MAJIC, cadastre.gouv.fr, etc..) et exécution des croisements pour enrichir ces données (scripts Bash, SQL et éventuellement Python)

R&D : amélioration/automatisation des scripts métier actuels, construction et production industrielle de nouveaux indicateurs en lien avec le pôle métier, utilisation d’api et de webservices.

• Autonomie, rigueur et proactivité sont des qualités indispensables du poste

• Excellent niveau technique en SGBD PostgreSQL et en requêtes spatiales SQL, connaissance des librairies GDAL/OGR 

• Maîtrise impérative de Dagster ou très bonnes connaissances Python

• Exécution de scripts en shell Bash, Python, SQL, notions réseau/api/applications web 

• Expérience de conception et de gestion de MCD complexes, sur des bases nationales (5 ans minimum)