Name
LSAT
Beschreibung
Juristischer Benchmark aus dem Law School Admission Test, erfordert Maching-Algorithmus (e.g. Rouge)
Task
Generative KI
Datenanf.
Benchmarkdatensatz
Modellzugriff
Inferenzzugang
Ergebnis
komplexe Ergebnisse
Automatisierbar
ja
Tiefe
Basismethode

Verweise

Relevante Qualitätskriterien
Leistungsfähigkeit und RobustheitMenschliche Aufsicht
Relevante Indikatoren
MA2.3VE1.2VE1.4VE1.5
Referenz

Implementierungen
https://github.com/zhongwanjun/AR-LSAT
Prüfwerkzeuge & Frameworks