Comum · Saberes
MMLU
Language understanding across multiple domains
Measuring Massive Multitask Language Understanding (MMLU) is a popular benchmark for evaluating the capabilities of large language models. It inspired several other versions and spin-offs, such as MMLU-Pro, MMMLU and MMLU-Redux.
Na Wikipédia
Texto em inglês Ainda não há artigo no seu idioma: trecho em inglês.
Measuring Massive Multitask Language Understanding (MMLU) is a popular benchmark for evaluating the capabilities of large language models. It inspired several other versions and spin-offs, such as MMLU-Pro, MMMLU and MMLU-Redux.
Texto: Wikipédia em inglês, CC BY-SA 4.0. ·
Cartas próximas
-
★
LLM-as-a-Judge
Use of large language models as automated evaluators
-
L★
Language model benchmark
Wikimedia list article
-
P★★★
PLLuM
Family of open large language models
-
★
múltiplas línguas
Característica de um elemento com mais de um idioma
-
★★★
UML
Linguagem de programação
-
M★★★★★
Modelos de linguagem em grande escala
Modelo de linguagem construído com enormes quantidades de textos