« COPEN » : différence entre les versions


Aucun résumé des modifications
Aucun résumé des modifications
Ligne 2 : Ligne 2 :


== Définition ==
== Définition ==
XXXXXXXXX
COPEN (de l'anglais  '''''CO'''nceptual knowledge '''P'''robing b'''EN'''chmark'') analyse les capacités de compréhension conceptuelle des '''[[Modèle de langue|modèles de langue]]''' '''[[préentraînés]]'''. Il contient une taxonomie de 446 concepts et des '''[[données]]''' de haute qualité pour 24 000 instances des tâches de '''jugement de similarité conceptuelle''', '''de jugement de propriété conceptuelle''' et '''conceptualisation dans des contextes'''.


== Français ==
== Français ==
''' COPEN'''
''' COPEN'''
''' XXXXXXX'''


== Anglais ==
== Anglais ==
'''COPEN'''
'''COPEN'''
  A new benchmark evaluates PLMs' conceptual knowledge through tasks assessing conceptual similarities, properties, and context comprehension, revealing significant gaps compared to human-like cognition.
Probing Conceptual Knowledge in Pre-trained Language Models


''' Conceptual Knowledge Probing Benchmark'''
<!--COPEN is a Conceptual knowledge Probing bENchmark that aims to analyze the conceptual understanding capabilities of pre-trained language models. It contains a concept taxonomy with 446 concepts and high-quality data for 24K instances of Conceptual Similarity Judgment task, Conceptual Property Judgment task and Conceptualization in Contexts task.-->


== Source ==
== Source ==

Version du 15 juin 2025 à 11:41

en construction

Définition

COPEN (de l'anglais COnceptual knowledge Probing bENchmark) analyse les capacités de compréhension conceptuelle des modèles de langue préentraînés. Il contient une taxonomie de 446 concepts et des données de haute qualité pour 24 000 instances des tâches de jugement de similarité conceptuelle, de jugement de propriété conceptuelle et conceptualisation dans des contextes.

Français

COPEN

XXXXXXX

Anglais

COPEN

Conceptual Knowledge Probing Benchmark

Source

Source : huggingface

Contributeurs: Arianne , wiki