Du 22 au 24 septembre 2027, la SEVAL et la DeGEval – Gesellschaft für Evaluation e.V. vous donnent rendez-vous à Fribourg-en-Brisgau (Allemagne) pour leur congrès annuel conjoint.
Sous le thème « AI and Evaluation – Towards a new era or back to the roots », cette édition sera aussi l’occasion de célébrer les 30 ans de la DeGEval 🎉. L’appel à contributions est ouvert : vous avez jusqu’au 9 mars 2027 pour soumettre vos propositions, en français, en allemand ou en anglais.
L’IA et l’évaluation : nouvelle ère ou retour aux sources ?
L’intelligence artificielle (IA) nourrit bien des fantasmes. Pourtant, il n’existe pas encore d’IA générale : ce sont aujourd’hui les grands modèles de langage, l’apprentissage automatique et l’automatisation qui dominent les débats et les pratiques. D’où l’importance de préciser de quelles applications on parle.
La lune de miel semble d’ailleurs terminée. Les désillusions s’accumulent : des algorithmes qui ont appris à discriminer, des réseaux sociaux associés à des difficultés psychologiques et, paradoxalement, à davantage d’isolement, des modèles de langage qui « hallucinent », et un Internet qui n’a pas tenu sa promesse d’un monde plus libre et plus égalitaire.
L’évaluation occupe une place centrale dans ces discussions. L’IA et l’évaluation partagent une même ambition d’apprendre, l’une du côté de la machine, l’autre du côté de l’humain. On pourrait en conclure que des systèmes capables de s’optimiser eux-mêmes finiront par rendre l’évaluation superflue. Cette hypothèse soulève pourtant des problèmes bien connus. Une IA qui s’évalue elle-même n’a aucune raison d’être neutre : la recherche montre déjà que les grands modèles de langage tendent à vouloir plaire. Que se passe-t-il lorsque des outils d’IA évaluent d’autres outils d’IA, ou lorsque des humains évaluent des outils d’IA, sans garantie d’une compréhension commune ? Et est-il acceptable, sur le plan normatif, que l’IA évalue des personnes et leurs comportements, par exemple dans l’accueil de l’enfance, l’éducation ou les soins ?
Le sujet couvre donc un large éventail de questions. Certaines sont très concrètes, comme la manière d’intégrer des outils d’IA dans une évaluation. D’autres touchent à la sécurité et à la protection des données, ou encore à la place respective de l’IA et de l’humain dans la société. D’autres enfin sont empiriques et portent sur les effets, voulus ou non, de ces outils sur les personnes, les organisations et les procédures.
Le congrès réunit les nombreux fils de cette réflexion. Celle-ci a déjà été amorcée lors de sessions isolées, des journées de printemps de plusieurs groupes de travail et au sein du groupe ad hoc fondé au printemps 2026. L’objectif est de dresser un état des lieux de l’évaluation à l’ère numérique et d’en esquisser les évolutions.
Les questions du congrès
- Quels effets l’IA a-t-elle sur les routines, la professionnalisation et les standards de l’évaluation ?
- Quels mythes se forment autour des applications d’IA (par exemple en matière d’économie de ressources) ?
- Quels enseignements tirer des conséquences, voulues ou non, du recours à l’IA dans les évaluations ?
- Quels problèmes éthiques pose l’utilisation de l’IA en évaluation ?
- À quoi ressemble le travail assisté par l’IA dans les projets d’évaluation, et quelles formes d’interaction y sont utilisées (du human-in-the-loop jusqu’à l’IA évaluative qui évalue d’autres applications d’IA) ?
- Dans quelle mesure les applications d’IA ont-elles modifié les attentes des mandant·es et des évaluateur·ices ?
- Quels concepts théoriques permettent de penser l’intégration de l’IA et de l’humain dans les contextes d’évaluation ?
Un Idea-Workshop permettra également de partager des expériences de terrain :
- Quels outils d’IA ont nettement changé vos pratiques d’évaluation, et pourquoi ?
- Quel est votre prompt le plus utile, et pourquoi ?
- Quelles recommandations donneriez-vous à d’autres évaluateur·ices pour leur éviter certaines leçons apprises à la dure ?
Comment participer ?
Il y a deux catégories de contributions :
- les contributions sur le thème du congrès, qui abordent l’IA et l’évaluation sous un angle scientifique, réflexif ou pratique, dans une perspective aussi interdisciplinaire et transversale aux politiques publiques que possible ;
- les contributions générales, qui portent sur l’évaluation sans traiter directement du thème du congrès. Elles sont aussi explicitement les bienvenues.
Trois formats sont proposés, en français, en allemand ou en anglais :
- Lightning talk : présentation de cinq minutes d’un projet de recherche ou de pratique, en cours ou achevé, centrée sur ses aspects innovants. Une session réunit jusqu’à dix lightning talks, chacun suivi de trois minutes de questions.
- Présentation individuelle : 20 minutes de présentation et 10 minutes de discussion, au sein de sessions thématiques de trois présentations au maximum. Les contributions à orientation théorique ou méthodologique, ou portant sur la recherche sur l’évaluation, sont privilégiées.
- Session complète : 90 minutes, sous forme de conférences, de table ronde, d’atelier ou autre. Toutes les personnes participantes doivent être nommées. Les sessions qui adoptent une perspective transversale aux politiques publiques sont privilégiées.
Les résumés (2500 caractères au maximum, espaces compris, ou 5000 pour une session complète) doivent être soumis d’ici au 9 mars 2027 via le système de gestion du congrès www.conftool.com/degeval2027. Attention, ce délai ne sera pas prolongé.
Les propositions sont évaluées de manière anonyme, notamment selon la pertinence du sujet, la qualité scientifique et méthodologique, la clarté du résumé, l’accent mis sur l’évaluation, le caractère innovant et la perspective transversale. Les réponses seront communiquées d’ici au 1er juin 2027.
Nous attendons avec impatience vos contributions et nous nous réjouissons de vous retrouver à Fribourg-en-Brisgau à l’automne prochain !
Toutes les informations et la soumission se trouvent ici.
