Papers with Code · CC BY-SA 4.0

OpenBookQA

아카이브 평가 45건 · 마지막 적재/변경 2026-10-30

평가 기록

과거 수집 기록이며 최신 순위가 아닙니다. 데이터셋 버전·split·실험 조건과 지표 방향이 검증되지 않은 결과는 직접 비교할 수 없습니다. 날짜는 논문 날짜이며 최신 평가일을 뜻하지 않습니다.

표가 화면보다 넓으면 좌우로 스크롤하여 논문과 구현 링크를 확인하세요.

원본 기록 순서 · 순위 미부여
모델	원본 지표·값	논문	구현
GPT-4 + knowledge base	Accuracy 95.9	연결 없음 논문 날짜 미기재	연결 없음
MVP-Tuning (ensemble)	Accuracy 95.2	연결 없음 논문 날짜 미기재	연결 없음
PaLM 540B (Self Improvement, Self Consistency)	Accuracy 94.4	Large Language Models Can Self-Improve 2022-10-20	연결 없음
X-Reasoner	Accuracy 94.2	연결 없음 논문 날짜 미기재	연결 없음
PaLM 540B (Self Improvement, CoT Prompting)	Accuracy 93	Large Language Models Can Self-Improve 2022-10-20	연결 없음
PaLM 540B (Self Improvement, Standard-Prompting)	Accuracy 92	Large Language Models Can Self-Improve 2022-10-20	연결 없음
DeBERTa-xxlarge 1.5B + MVP-Tuning	Accuracy 91.3	연결 없음 논문 날짜 미기재	연결 없음
PaLM 540B (Self Consistency)	Accuracy 90	Large Language Models Can Self-Improve 2022-10-20	연결 없음
GrapeQA: PEGA+CANP	Accuracy 90	GrapeQA: GRaph Augmentation and Pruning to Enhance Question-Answering 2023-03-22	연결 없음
GenMC 11B	Accuracy 89.8	Clues Before Answers: Generation-Enhanced Multiple-Choice QA 2022-04-30	코드 1
AristoRoBERTa + MVP-Tuning	Accuracy 87.6	연결 없음 논문 날짜 미기재	연결 없음
AristoRoBERTa + Graph Soft Counter	Accuracy 87.4	GNN is a Counter? Revisiting GNN for Question Answering 2021-10-07	연결 없음
UnifiedQA 11B	Accuracy 87.2	UnifiedQA: Crossing Format Boundaries With a Single QA System 2020-05-02	코드 1 · 코드 2
LLaMA-3 8B+MoSLoRA	Accuracy 86.8	Mixture-of-Subspaces in Low-Rank Adaptation 2024-06-16	코드 1
PaLM 540B (CoT Prompting)	Accuracy 86.4	Large Language Models Can Self-Improve 2022-10-20	연결 없음
LLaMA-3 8B + MixLoRA	Accuracy 84.8	MixLoRA: Enhancing Large Language Models Fine-Tuning with LoRA-based Mixture of Experts 2024-04-22	코드 1 · 코드 2
PaLM 540B (Standard-Prompting)	Accuracy 84.4	Large Language Models Can Self-Improve 2022-10-20	연결 없음
TTTTT 3B	Accuracy 83.2	Fusing Context Into Knowledge Graph for Commonsense Question Answering 2020-12-09	코드 1 · 코드 2
LLaMA-2 13B + MixLoRA	Accuracy 83	MixLoRA: Enhancing Large Language Models Fine-Tuning with LoRA-based Mixture of Experts 2024-04-22	코드 1 · 코드 2
AristoRoBERTa + QA-GNN	Accuracy 82.8	QA-GNN: Reasoning with Language Models and Knowledge Graphs for Question Answering 2021-04-13	코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6
QA-GNN	Accuracy 82.8	QA-GNN: Reasoning with Language Models and Knowledge Graphs for Question Answering 2021-04-13	코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6
DEKCOR	Accuracy 82.4	Fusing Context Into Knowledge Graph for Commonsense Question Answering 2020-12-09	코드 1 · 코드 2
GrapeQA: PEGA	Accuracy 82	GrapeQA: GRaph Augmentation and Pruning to Enhance Question-Answering 2023-03-22	연결 없음
LLaMA-2 7B + MixLoRA	Accuracy 81.6	MixLoRA: Enhancing Large Language Models Fine-Tuning with LoRA-based Mixture of Experts 2024-04-22	코드 1 · 코드 2
AristoRoBERTa	Accuracy 77.8	QA-GNN: Reasoning with Language Models and Knowledge Graphs for Question Answering 2021-04-13	코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6
BiLSTM max-out question-match (science fact + common knowledge fact)	Accuracy 76.9	Can a Suit of Armor Conduct Electricity? A New Dataset for Open Book Question Answering 2018-09-08	코드 1
Careful Selection	Accuracy 72	Careful Selection of Knowledge to solve Open Book Question Answering 2019-07-24	연결 없음
GrapeQA: CANP	Accuracy 66.2	GrapeQA: GRaph Augmentation and Pruning to Enhance Question-Answering 2023-03-22	연결 없음
GPT-3 175B (few-shot, k=32)	Accuracy 65.4	Language Models are Few-Shot Learners 2020-05-28	코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57 · 코드 58 · 코드 59 · 코드 60 · 코드 61 · 코드 62 · 코드 63 · 코드 64 · 코드 65 · 코드 66 · 코드 67
PaLM 2-L (1-shot)	Accuracy 58.5	PaLM 2 Technical Report 2023-05-17	코드 1