Name
OpenBookQA
Beschreibung
Question-Answering Benchmark
Task
Generative KI
Datenanf.
Benchmarkdatensatz
Modellzugriff
Inferenzzugang
Ergebnis
einzelne/mehrere reelle Zahlen
Automatisierbar
ja
Tiefe
Basismethode

Verweise

Relevante Qualitätskriterien
Leistungsfähigkeit und RobustheitMenschliche Aufsicht
Relevante Indikatoren
MA2.3VE1.2VE1.4VE1.5
Referenz
https://arxiv.org/abs/1809.02789
Implementierungen
https://huggingface.co/datasets/allenai/openbookqa
Prüfwerkzeuge & Frameworks
Citadel Lens