Contexte :

Vous intégrerez une équipe d’une quinzaine d’ingénieurs et docteurs régulièrement accompagnés de post-doctorants, doctorants et stagiaires, spécialisée dans l’évaluation et la qualification des systèmes d’intelligence artificielle et la robotique. Cette équipe est historiquement reconnue pour son expertise dans l’évaluation des systèmes de traitement automatique de l’information (traitement de la langue, traitement de l'image, etc.). Depuis quelques années, elle couvre également l’évaluation des robots intelligents tels que les dispositifs médicaux, les robots industriels collaboratifs, les véhicules autonomes, etc. L’équipe met actuellement en place les LEIA (Laboratoires d’Evaluation des Intelligences Artificielles), des infrastructures de test physiques et simulation pour l’IA et la robotique. Elle capitalise sur les savoir-faire à la fois divers et ciblés de ses experts (TAL, imagerie, robotique, etc.) afin d’apporter conjointement une solution satisfaisante au besoin d’évaluation et de certification des systèmes intelligents pour tous les secteurs de l’industrie.

Missions

En tant qu’ingénieur(e), vous interviendrez principalement sur le projet européen LLMs4EU (https://www.alt-edic.eu/projects/llms4eu/), qui a pour objectif de collecter des données européennes de qualité pour l’entraînement de modèles européens souverains et performants, de produire des modèles LLM adaptés au contexte européen, et également mettre en place un réseau européen de centres d’évaluation des LLM. Le LNE est co-pilote dans la mise en place du réseau
Ingénieur en évaluation de l’IA générative et développement d’un réseau européen de centres d’essais H/F
européen, en produisant notamment un business plan permettant d’assurer la pérennité de ces centres d’évaluations. Le LNE est également directement impliqué dans le développement de méthodologies et de procédures pour la réalisation d’essais qui constitueront des essais pilote au sein de ce réseau.
Vous rejoindrez une équipe de 5 docteurs et ingénieurs travaillant actuellement sur ce projet, en lien très étroit avec le reste des partenaires européens du consortium. En plus de votre expertise dans l’évaluation des LLMs, des compétences dans la planification financière et économique seront fortement attendues pour accompagner l’équipe dans l’élaboration du business plan. Vos contributions amèneront à la rédaction d’articles scientifiques.
Ce poste présente une formidable opportunité d’aborder à la fois des questions techniques (évaluation de l’IA), ainsi que des questions socio-économiques, stratégiques et de gouvernance (développement d’un réseau de centres d’essais IA pérenne).

Vous couvrirez les missions suivantes :

- Sur les aspects business model (50%) :
o Planification financière et économique des centres d’évaluations des LLMs, en s’appuyant notamment sur des échanges avec les partenaires du projet (entreprises privées et laboratoires) qui constitueront les premiers centres du réseau. A cette fin, vous proposerez une méthode de consultation des parties prenantes. Vous serez assisté par des membres de l’équipe du LNE et par le coordinateur du projet européen.
o Rédaction d’une première version de business plan, prenant en compte les différentes parties prenantes possibles du réseau, et détaillant le raisonnement ayant mené à son élaboration.

- Sur les aspects évaluation de l’IA (50%) :
o Veille scientifique et technologique sur les différentes thématiques de l’évaluation des LLMs
o Mise en place de méthodologies d’évaluation des LLMs (AI as judge, task-oriented, hallucinations, …)
o Evaluations prototypes des LLMs sur des cas d’utilisation (QA, traduction, …)

Vos missions vous amèneront notamment à réaliser ce type d’activités :

• Echanges réguliers avec les partenaires européens du consortium, avec éventuellement des déplacements en Europe
• Participation à des congrès européens
• Rédaction d’articles scientifiques

Profil

Vous êtes titulaire d'un diplôme de niveau bac + 5 ou bac + 8, soit en informatique / intelligence artificielle et présentant une réelle compréhension des enjeux économiques et stratégiques, soit issu des sciences de la gestion / économie / innovation / droit / géopolitique et présentant une réelle compréhension des enjeux techniques de l’IA.
Une solide connaissance de l’IA générative et/ou du Traitement Automatique des Langues sera un élément différenciateur de votre candidature.
Vos expériences passées montrent votre capacité à collaborer dans un environnement multidisciplinaire, en contact avec des interlocuteurs académiques et privés. Une expérience des projets européens sera appréciée.
Vous disposez d’un très bon niveau écrit et parlé en français et en anglais.
Vous saurez faire preuve d’initiative et de rigueur, en disposant d’une large autonomie et d’un potentiel de créativité vous permettant d’occuper pleinement votre espace de fonction dans un objectif d’excellence.