A test run is a single execution of a benchmark test using a defined model configuration.
Each run represents how a particular large language model (LLM) — such as GPT-4, Claude-3, or Gemini — performed on a given task at a specific time, with specific settings.
A test run includes:
Together, test runs make it possible to compare models, providers, and configurations across benchmarks in a transparent and reproducible way.
manuscript transcription handwritten 15 de prose
openrouter moonshotai/kimi-k3 · temp 0.0 · dataclass Document
One model response from this run. The per-input comparison needs JavaScript.
manuscript transcription handwritten 15 de prose
anthropic claude-fable-5-1 · temp 0.0 · dataclass Document
One model response from this run. The per-input comparison needs JavaScript.
{
"folios": [
{
"folio": "3",
"text": "vnd ein pferit die mir vnd
minen knechten vber hulfend
den do was nienan kein weg
denne den wir machtend
vnd vielend die knecht dick
vnd vil in vntz an den ars
vnd die pferit vntz an die
settel vnd was ze mol ein grosser
nebel dz wir kum gesachend
vnd als mit grosser arbeit kame
wir ze mittem tag zuo sant
kristoffel vff den berg do
do sach ich die buecher do gar
vil herren wopen in stone
die ir stur de hin geben hand
do stuond mines vatters seligen
wopen och in dem einen",
"addition1": "",
"addition2": "",
"addition3": ""
}
]
}manuscript transcription handwritten 15 de prose
openrouter meta/muse-spark-1.2 · temp 0.0 · dataclass Document
One model response from this run. The per-input comparison needs JavaScript.
{"folios":[{"folio":"3","text":"Vnd ein pferit die wir mit
minen knechten vber hulffend
den So was mench kuon weg
denne den wir machtend
vnd vichend die knecht duk
vnd vil in vntz an den arb
vnd die pferit vntz an die
petel vnd was ze mal ein grosser
nebel dz wir kum gesahend
vnd also mit grosser arbeit kame
wir ze mittem tag zuo sant
kristoffel vff den berg do
do sach ich die buocher do gar
vil herren wopen zu stone
die in stur edlen geben hand
do stuond mines vatters seligen
wopen och in dem cimey","addition1":"","addition2":"","addition3":""}]}manuscript transcription handwritten 15 de prose
openrouter qwen/qwen3.5-flash-02-23 · temp 0.0 · dataclass Document
One model response from this run. The per-input comparison needs JavaScript.
{"folios":[{"folio":"3","text":"vnd ein pferit die wir vnd
minen knechten wider rufend
sen do was meinen kün weg
deme den wir machten vnd
vielen die knecht vnd
vil in vnz an den and
vnd die pferit vnz an die
pettel vnd was ze mol ein grofse
nebel dz wir kum gepaßend
vnd als mit großer arbeit kam
wir ze mittem tag zu pant
krapffel vff den berg do
do sach ich die bücher so gar
vil herren wappen zu ston
die ir stir ob im geben hand
do stund meines vatters pflegen
wappen och in dem einen","addition1":"","addition2":"","addition3":""}]}manuscript transcription handwritten 15 de prose
openrouter qwen/qwen3-vl-8b-instruct · temp 0.0 · dataclass Document
One model response from this run. The per-input comparison needs JavaScript.
{"folios":[{"folio":"3","text":"Und ein pferit Die mir und
minen knechten vber Rulfend
sag Do was menen zyn weg
some den wir machtend
und vielend die knchte dud
und vil in vntz angen arb
und die pferit vntz an die
pettel und was ze mol ein groffer
nebel dz wir zum ogepaffend
und als mit groffer arbeit kome
wir ze mitttem tag zu Pant
Einpoffel vff den berg do
Do sach ich die buchter do gar
vil gerrin Woppen in stone
Die ir stur Edlhm gebeey hand
Do pound mince vatterb Plugen
Woppen ach in dem ziney","addition1":"","addition2":"","addition3":""}]}manuscript transcription handwritten 15 de prose
anthropic claude-fable-5 · temp 0.0 · dataclass Document
One model response from this run. The per-input comparison needs JavaScript.
{"folios":[{"folio":"3","text":"Vnd ein pferit die mir vnd
minen knechten vber hulfend
den do was menan kein weg
denne den wir machtend
vnd vielend die knecht dick
vnd vil in vntz an den ars
vnd die pferit vntz an die
settel vnd was ze mol ein grosser
nebel dz wir kum gesachend
vnd also mit grosser arbeit kame
wir ze mittem tag zuo sant
kristoffel vff den berg do
do sach ich die buecher do gar
vil herren wopen in stein
die ir stur de hin geben hand
do stuond mines vatters seligen
wopen och in dem einen","addition1":"","addition2":"","addition3":""}]}manuscript transcription handwritten 15 de prose
openrouter qwen/qwen3.5-27b · temp 0.0 · dataclass Document
One model response from this run. The per-input comparison needs JavaScript.
{"folios":[{"folio":"3","text":"vnd ein pferit die mir vnd
minen knechten wider gultend
san so was menan kanz weg
deme dan wir machgend
vnd vichend die knechte durb
vnd vil in vntz an den arb
vnd die pferit vntz an die
pettel vnd was ze mol ein grosser
nebel dz wir kum gepatsend
vnd als mit grosser arbeit kame
wir ze mittren tag zu Pant
kirstoffel uff den berg do
do sach ich die burger do gar
vil herren wopen im ston
sie ir stur dz sin gebey hand
do stand minneb vatterb slugen
wopen och in dem einen","addition1":"","addition2":"","addition3":""}]}manuscript transcription handwritten 15 de prose
huggingface MiniMaxAI/MiniMax-M3 · temp 0.0 · dataclass Document
One model response from this run. The per-input comparison needs JavaScript.
{"folios":[{"folio":"3","text":"vnd ein pherit die wir vnd
minen knehten oder hulffind
den So was minen kneht weg-
denne den wir machtend
vnd richtend die kneht sich
mit vil in vng an den vnd
vnd die pherit vng an die
ketel vnd was ze mol in grosser
not dz wir kum geachtend
vnd als mit grosser arbeite kam-
en wir ze mittem tag zu sant
fridhoff vff den berge do
do sach ich die brucken do gar
vil herren wopen in hand
die in fůr schin geberg hand
do stund minen vatterd klaget
wopen och in dem einig","addition1":"","addition2":"","addition3":""}]}manuscript transcription handwritten 15 de prose
openrouter qwen/qwen3.5-397b-a17b · temp 0.0 · dataclass Document
One model response from this run. The per-input comparison needs JavaScript.
{"folios":[{"folio":"3","text":"Vnd ein pferit die mir vnd
minen knechten vber Ruland
ten do was menen ganꝛ weg
deme den wir machtend
vnd vieliend die knehte daz
vnd vil in vntz an den arb
vnd die pferit vntz an die
sattel vnd was ze mol ein groſſer
nebel dz wir kum gepaſſend
vnd alſ mit groſſer arbeit kame
wir ze mittem tag zu Sant
Cristoffel vff den berg do
do ſach ich die buͤchſen do gar
vil herren wapen zu ſtand
die ir stirn ſchin gebey hand
do ſtund mines vatters pluͤgen
wapen och in dem einen","addition1":"","addition2":"","addition3":""}]}manuscript transcription handwritten 15 de prose
anthropic claude-opus-4-8 · temp 0.0 · dataclass Document
One model response from this run. The per-input comparison needs JavaScript.
{"folios":[{"folio":"3","text":"vnd ein pferit die mir vnd
minen knechten iber hulffend
den do was menen kein weg
denne den wir machtend
vnd ziehend die knecht dick
vnd vil in vntz an den ars
vnd die pferit vntz an die
settel vnd was ze mol ein grosser
nebel dz wir kum gesahend
vnd als mit grosser arbeit kome
wir ze mittem tag zu sant
kristoffel vff den berg do
do sach ich die bücher do gar
vil herren wopen zu stone
die ir stür do hin geben hand
do stund mines vatters seligen
wopen och in dem einen","addition1":null,"addition2":null,"addition3":null}]}