Chercheur post-doctoral en évaluation de solutions d'intelligence artificielle H/F
Laboratoire National de Métrologie et d'Essais
Paris
CDI
Temps-plein
Il y a 1 mois
MissionsVous intégrerez une équipe d'une quinzaine d'ingénieurs et docteurs régulièrement accompagnés de post-doctorants, doctorants et stagiaires, spécialisés dans l'évaluation des systèmes d'intelligence artificielle, et la cybersécurité. Cette équipe est reconnue pour son expertise dans l'évaluation des systèmes de traitement automatique de l'information (traitement de la langue, traitement de l'image, etc.) et l'évaluation des robots intelligents (dispositifs médicaux, robots industriels collaboratifs, véhicules autonomes, etc.). Elle capitalise sur les savoir-faire à la fois divers et ciblés de ses experts (TAL, imagerie, robotique, etc.) afin d'apporter conjointement une solution satisfaisante au besoin d'évaluation et de certification des systèmes intelligents.L'équipe travaille principalement en mode projet (projets de recherche et commerciaux). Ces projets peuvent être internes ou collaboratifs (plusieurs partenaires), nationaux ou européens. Dans certains cas de figure, le LNE peut être le coordinateur principal du projet (chef de file de plusieurs partenaires) et/ou piloter certains lots de travaux impliquant différents partenaires. De façon générale, le département est impliqué sur une vingtaine de projets en parallèle, d'une durée allant de quelques semaines à plusieurs années.Vos missions s'inscriront dans le cadre du projet européen KOIOS, financé par le programme European Defence Fund (https://edrin.org/fileadmin/media/Factsheet\_EDF21\_KOIOS.pdf). Ce projet s'intéresse aux solutions d'IA dans le domaine de la défense, et s'attache à garantir leur sécurité, leur robustesse, leur frugalité, leur résilience et leur explicabilité. Afin d'atteindre le niveau de garantie attendu, le LNE pilotera des évaluations des solutions IA, en mettant au point les procédures d'évaluation adaptées et en choisissant les métriques permettant de quantifier les différents types de performance attendus (frugalité, etc.).Les solutions d'IA évaluées relèvent des domaines de l'extraction de connaissances (knowledge extraction), le traitement automatique des langues (natural language processing), et le traitement d'images. Les tâches réalisées par les solutions IA sont : génération de « risk maps », segmentation d'images et transcription de la parole. Pour chacune de ces tâches, le consortium a déjà identifié un ensemble de métriques d'évaluation, qu'il sera nécessaire de formaliser au sein d'une procédure d'évaluation rigoureuse.Vous couvrirez les missions suivantes :
Recherche documentaire et rédaction d'un état de l'art sur les méthodes et métriques d'évaluation des performances attendues (robustesse, frugalité, explicabilité, etc.)
Sélection et proposition des métriques permettant de quantifier le niveau de performance attendu des solutions IA (en termes de robustesse, frugalité, etc.)
Préparation des protocoles d'évaluation des solutions IA développées.
Pilotage des campagnes d'évaluation. Cette tâche inclut des aspects de gestion organisationnelle (en interne à l'équipe LNE et avec les partenaires du consortium), et des aspects techniques (participer, avec l'équipe LNE, à la réalisation des évaluations)
Contribution à la spécification des données nécessaires à l'apprentissage et à l'évaluation des solutions IA
Rédaction d'au moins un article scientifique relatif aux travaux que vous aurez effectués dans le cadre du post-doctorat, avec restitution en conférence le cas échéant.
Il sera attendu de vous une participation très active aux réunions de projet en anglais, la capacité à restituer à l'équipe LNE et aux partenaires les informations que vous aurez recueillies, et la capacité à interagir avec l'équipe LNE pour organiser efficacement et collaborativement les tâches à réaliser. Enfin, un certain nombre de déplacements à l'étranger seront effectués pour participer aux différents workshops organisés par les partenaires du projet.ProfilVous êtes titulaire d'un diplôme d'un Bac +8, avec spécialité en informatique et en intelligence artificielle.Idéalement, vous avez une spécialisation en traitement automatique des langues, en traitement d'images ou en extraction de connaissances.Vous savez démontrer, d'après vos travaux de recherche passés, votre bonne compréhension des problématiques d'évaluation des systèmes d'IA.Votre parcours montre une expérience passée dans le cadre d'un projet de recherche (national, ou idéalement international). Une expérience dans le domaine de la défense sera un plus.Vous avez déjà une expérience de restitution et présentation de vos travaux en conférence, congrès, séminaires ou réunions.Vous disposez d'excellentes capacités rédactionnelles (français, anglais), et savez démontrer vos excellentes capacités de communication (en français et en anglais, en interne avec l'équipe et avec des partenaires externes).Vous saurez démontrer votre autonomie, votre capacité à la prise d'initiatives, et votre capacité à la coordination d'activités techniques.
