Programme
Evaluation LLM / RAG
9:00 - 10:30 (1h30)
chair : N. Diniz
09:15 - 09:40 (25min)
Analyse des signaux de mémorisation dans les modèles de langage à poids ouverts
Hichem Semmar, Eric Sanjuan
09:40 - 10:05 (25min)
TABIB: Vers un Benchmark Adversarial Français pour les LLMs Biomédicaux
Rian Touchent, Eric de la Clergerie
10:05 - 10:30 (25min)
Évaluation de métriques de RAG dans un contexte applicatif : une expérience, ses conclusions et ses limites
Quentin Brabant
Pause café
10:30 - 11:00 (30min)
L'Alliance pour les technologies des langues (ALT-EDIC): Une infrastructure au service de l'écosystème européen
11:00 - 11:45 (45min)
Edouard Geoffrois - ALT-EDIC
Déjeuner
12:30 - 14:00 (1h30)
Challenge liage d'entités
14:00 - 14:30 (30min)
Annonce et présentation vainqueur - chair : J. Flament
Evaluation LLM / RAG
14:30 - 16:10 (1h40)
chair : J. Fouchier
14:30 - 14:55 (25min)
Fabrique sémiotique hybride et évaluation stratifiée des systèmes RAG sur SciFact
Christophe Denis
14:55 - 15:20 (25min)
Les systèmes GraphRAG en pratique : vers une taxonomie des questions, des méthodes et défis d'évaluation
Carmelle Meli Songuon, Raphaël Troncy, Yoan Chabot
15:20 - 15:45 (25min)
CoRAFIG : corpus multi-genre pour la méta-évaluation du résumé automatique en français
Louis Jourdain, Skander Hellal
15:45 - 16:10 (25min)
Quantification du conflit entre mémoire paramétrique et mémoire contextuelle : Étude des Métriques de Dégradation sur la Famille de modèles Qwen3.5
Hugo De Bosschere, Maximillien Lyonnais, Clément Geliot, Joël Legrand
Pause café
16:10 - 16:30 (20min)
Session poster
16:30 - 18:00 (1h30)
chair : C. Servan
16:30 - 18:00 (1h30)
Participation au défi EvalLLM2026 : pipeline RAG scalable pour la QA en français
Lucas Anki, Léo Gaillard, Parmentier François, Justine Revol
16:30 - 18:00 (1h30)
Jusqu'où peut-on aller avec la sémantique ?
Johannes Heinecke, Munshi Asadullah
16:30 - 18:00 (1h30)
CEA-List@EvalLLM 2026 liage d'entités : associer approche agentique et modèle à base de plongements
Robin Armingaud, Mohamed Hatmi, Romaric Besançon, Olivier Ferret, Labbé Benjamin
16:30 - 18:00 (1h30)
ELO-GRAG@EvalLLM 2026 : vers un système HybridRAG combinant graphes de connaissances et texte, évalué sur un corpus de défense en français
Thibault Ehrhart, Carmelle Meli Songuon, Julien Plu, Raphaël Troncy, Yoan Chabot, Edouard Trouillez, Oscar Moreno Escobar
16:30 - 18:00 (1h30)
Sous contraintes choisies : un RAG attribué frugal et souverain, fiabilisé par un diagnostic déterministe
André-Louis Rochet, Paul Lemaistre, Léo Appourchaux
16:30 - 18:00 (1h30)
LIPN-RAG @ EvalLLM~2026 : récupération hybride et reclassement neuronal pour le défi RAG
Yash Kankanampati, Nadi Tomeh, Joseph Le Roux
16:30 - 18:00 (1h30)
Un système hybride de liage d'entités et de questions-réponses à l'ère des LLMs: Une contribution aux challenges EvalLLM2026
Mustapha Benbarka
16:30 - 18:00 (1h30)
Kairntech à EvalLLM 2026 : Entity linking
Marion Leteillier, Olivier Terrier, Kévin Deturck
16:30 - 18:00 (1h30)
RAG Optimisation - RAGO au challenge RAG d'EvalLLM2026
Briag Rehel, Farah Benamara, Chloé Braud, Adrien Bonneu
16:30 - 18:00 (1h30)
La liste de candidats comme goulot : liage d'entités sans entraînement
Olivier Caron
16:30 - 18:00 (1h30)
Participation de l'équipe Inria Défense et Sécurité au challenge EvalLLM 2026 sur le liage d'entités
Coralie Pottiez, Benjamin Baré, Pauline Soutrenon
16:30 - 18:00 (1h30)
GINGER@EvalLLM2026 : étude comparative de différentes approches pour l'attribution de sources dans un système RAG
Catherine KOBUS, François Lancelot, Marion-Cécile Martin, Adriano Giuliani
16:30 - 18:00 (1h30)
Kairntech à EvalLLM 2026 : RAG et attribution de sources
Marion Leteillier, Kévin Deturck
16:30 - 18:00 (1h30)
Évaluation de la cohérence des modèles vision-langage pour la tâche de question-réponse visuelle
Khanh-An C. Quan, Camille Guinaudeau, Shin'ichi Satoh
16:30 - 18:00 (1h30)
Monamocost, une Pipeline RAG Open-Source pour la Recherche d'Information en Domaine Spécialisé Défense : Participation au Challenge EvalLLM 2026
Nathan Boucneau, Stéphane Hordoir, Mourad Latoundji, Constance Nguyen, Mohamed Amar
16:30 - 18:00 (1h30)
Approche frugale et souveraine pour la recherche documentaire sur un corpus de défense
Christophe Denis
16:30 - 18:00 (1h30)
Un pipeline RAG au niveau page pour EvalLLM 2026
Abdelhak Kelious
16:30 - 18:00 (1h30)
RAG frugal et entièrement libre pour le domaine défense en français: une soumission au challenge EvalLLM 2026
Toadoum Sari Sakayo
16:30 - 18:00 (1h30)
Fabriquer pour évaluer : sélection de composants RAG et attribution de sources sur corpus francophone spécialisé et non annoté
Hichem Ammar Khodja
16:30 - 18:00 (1h30)
Revisite du légendage de différences d'images avec BLIP2IDC
Gautier Evennou, Ewa Kijak, Vivien Chappelier, Antoine Chaffin
16:30 - 18:00 (1h30)
Évaluation de la reconnaissance automatique de la parole par les grands modèles de langage génératifs
Thibault Bañeras-Roux, Kumar Shashi, Driss Khalil, Sergio Burdisso, Petr Motlicek, Shiran Liu, Mickael Rouvier, Jane Wottawa, Richard Dufour
16:30 - 18:00 (1h30)
What Do Current Evaluation Practices Evaluate About LLMs in Ontology-Oriented Generation?Focused Review for Specialized-Domain Settings
Dhaker iyad Nejah, Mounira Harzallah, Giuseppe Berio, Yasamin Eslami
16:30 - 18:00 (1h30)
De l'outil au scénario : génération automatique de benchmarks pour agents conversationnels
Alexandre Gallot, Louis Jourdain
16:30 - 18:00 (1h30)
Les données de calibration comptent-elles vraiment pour LoRA?
Benedictus Kent Rachmat, Thomas Gerald, Zheng Zhang, Cyril Grouin
16:30 - 18:00 (1h30)
Sélection de résumés par aspect pour le déploiement industriel : agrégation de Borda multi-objectif sans référence
Carl Hatoum, Catherine Combes, Virginie Burnaz-Fresse, Christophe Gravier, Mathieu Orzalesi