Zum Inhalt springen

Gespeicherte Fähigkeits-Matrix abrufen

GET
/v1/matrix
curl --request GET \
--url https://example.com/v1/matrix \
--header 'Authorization: Bearer <token>'

Ergebnis aller bisherigen probe-Läufe, persistiert unter state_dir/model-matrix.json. Leer, bevor der erste Test läuft.

Matrix.

Media typeapplication/json
object
updated_at
string format: date-time
reports

Schlüssel: “model@endpoint”

object
key
additional properties
object
model
string
endpoint
string
ran_at
string format: date-time
declared_ctx

Aus /api/show gemeldete maximale Kontextgröße

integer
levels
Array<object>
object
level
integer
name
string
ok
boolean
duration_ms
integer
note
string
tech_fail

Technischer Fehler (Timeout, Verbindung) statt inhaltlichem Fehlschlag

boolean
max_level
integer
ctx
Array<object>
object
tokens
integer
ok
boolean
duration_ms
integer
note
string
tech_fail
boolean
effective_ctx

Größter tatsächlich funktionierender Kontext

integer
tokens_per_sec
number
tech_fails
integer
compute

GPU, CPU, “GPU nn%” bei Teil-Offload, oder leer

string
size_vram
integer
size_mem
integer
deep
object
target_tokens
integer
approx_chars
integer
duration_ms
integer
baseline
boolean
score

Gewichteter Prozent-Score über alle Tiers

number
tiers
object
key
additional properties
object
earned
integer
max
integer
answers
Array<object>
object
tier
string
Allowed values: retrieval multihop aggregation
depth

Position der Tatsache im Dokument in %, nur bei retrieval

integer
question
string
expected
string
got
string
ok
boolean
error
string
error

Wenn gesetzt: Modell auf diesem Endpoint nicht nutzbar

string
Example
{
"reports": {
"additionalProperty": {
"deep": {
"answers": [
{
"tier": "retrieval"
}
]
}
}
}
}