MTEB

embedding · aggregate↗ Quelle

43Evidence

active

What it measures

Einbettungsqualitaet ueber Retrieval, Clustering, Klassifikation und mehr.

What it does not measure

Generieren, Latenz im Betrieb, Speicherbedarf.

Der Mittelwert ueber sehr verschiedene Teilaufgaben laedt zum Optimieren auf die Rangliste ein. Fuer eine konkrete Anwendung zaehlt die passende Teilaufgabe, nicht der Gesamtwert.

How the score is composed

Currency84

Discrimination0

Headroom71

Contamination safety15

Gaming resistance55

Methodological rigor50

Reproducibility60

Details

Benchmaxxing risk: medium
Difficulty: medium
Public test set: yes
Human-verified: no
LLM-judged: no
Letzter Messwert: 2026-09-14
Skala: 0–100 avg. score (höher besser)

Best measured models

1EmbeddingGemma 2Google DeepMindvendor number78.68 avg. score