Predictice est à la recherche d’un Data Engineer confirmé pour rejoindre son équipe dynamique et participer au développement et à la maintenance de son infrastructure de données. Vous serez responsable de la conception, du développement et de la mise en œuvre de pipelines de données évolutifs, ainsi que de l’optimisation des processus existants. Vous assurerez la disponibilité, la qualité et la fiabilité des données utilisées dans les modèles et les produits de Predictice.

Responsabilités :

• concevoir, développer et maintenir des pipelines de données à grande échelle, en utilisant principalement Scala, Spark, Elasticsearch, Python et Airflow

• intégrer et transformer des données provenant de différentes sources en formats adaptés à l’analyse et à l’apprentissage automatique ;

• optimiser les performances des pipelines de données et résoudre les problèmes de latence, de scalabilité et de fiabilité.

• Expérience professionnelle de 2 à 5 ans en tant que Data Engineer ou dans un rôle similaire.

• Excellente maîtrise du langage de programmation Scala ou Python

• Capacité à travailler dans un environnement agile, à gérer les priorités et à respecter les délais.

• Esprit d’équipe et excellentes compétences en communication.

Stack : 

Scala, Python, Spark, Airflow, AWS, Kubernetes, Elasticsearch