Data Engineer

Les missions du poste

Au sein de la direction Data & Technologie, la tribu 2IA ("Intégration Intelligence Artificielle), est chargée du développement, de l’évaluation et du déploiement des outils d'IA et de Machine Learning générant des métadonnées documentaires afin d'améliorer la "Découvrabilité des Contenus" et d'offrir de nouvelles expériences de recherche.

Vos missions

Mission :

La DDT souhaite renforcer la tribu 2IA par un profil Data Engineer pour intégrer l’équipe IA et participer à l'activité de l'équipe RUN, en charge du déploiement de la plateforme DATA/IA.

Dans le cadre de cette mission, les prestations attendues sont :

• Conception et développement des pipelines de données de la Tribu 2IA ;
• Écriture de codes métiers, dans le respect des bonnes pratiques et des standards de développement ;
• Maintien en conditions opérationnelles de l'infrastructure de calculs sur les composants déployés et administrés par la Tribu 2IA ;
• Gestion du run et du bon déroulement des traitements.

Vos compétences

Profil :

Le profil Data Engineer devra avoir une expérience et justifier d'un certain niveau d'expertise sur les technologies suivantes :

• Stockage Lakehouse (Iceberg)
• Orchestration de containers (Kubernetes)
• Orchestration de workflow et batch processing (Airflow, Spark)
• Programmation Python avancée