← Arithmetic Reasoning
Papers with Code · CC BY-SA 4.0

GSM8K

아카이브 평가 164건 · 마지막 적재/변경

평가 기록

과거 수집 기록이며 최신 순위가 아닙니다. 데이터셋 버전·split·실험 조건과 지표 방향이 검증되지 않은 결과는 직접 비교할 수 없습니다. 날짜는 논문 날짜이며 최신 평가일을 뜻하지 않습니다.

표가 화면보다 넓으면 좌우로 스크롤하여 논문과 구현 링크를 확인하세요.

원본 기록 순서 · 순위 미부여
모델원본 지표·값논문구현
GPT-2-Medium 355M (fine-tuned, BS=5)
Accuracy
18.3
Parameters (Billion)
0.355
Composing Ensembles of Pre-trained Models via Iterative Consensus
2022-10-20
연결 없음
LLaMA 7B (maj1@k)
Accuracy
18.1
Parameters (Billion)
7
LLaMA: Open and Efficient Foundation Language Models
2023-02-27
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57
PaLM 540B (few-shot)
Accuracy
17.9
Parameters (Billion)
540
Large Language Models are Zero-Shot Reasoners
2022-05-24
코드 1 · 코드 2 · 코드 3 · 코드 4
PaLM 540B (Standard-Prompting)
Accuracy
17.9
Parameters (Billion)
540
Large Language Models Can Self-Improve
2022-10-20
연결 없음
LLaMA 13B
Accuracy
17.8
Parameters (Billion)
13
LLaMA: Open and Efficient Foundation Language Models
2023-02-27
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57
GPT-2-Medium 355M + question-solution classifier (BS=1)
Accuracy
16.8
Parameters (Billion)
0.355
Composing Ensembles of Pre-trained Models via Iterative Consensus
2022-10-20
연결 없음
Minerva 8B (8-shot)
Accuracy
16.2
Parameters (Billion)
8
Solving Quantitative Reasoning Problems with Language Models
2022-06-29
코드 1
GPT-2-Medium 355M (BS=5)
Accuracy
12.2
Parameters (Billion)
0.355
Composing Ensembles of Pre-trained Models via Iterative Consensus
2022-10-20
연결 없음
LLaMA 7B
Accuracy
11.0
Parameters (Billion)
7
LLaMA: Open and Efficient Foundation Language Models
2023-02-27
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57
Text-davinci-002-175B (0-shot)
Accuracy
10.4
Parameters (Billion)
175
Large Language Models are Zero-Shot Reasoners
2022-05-24
코드 1 · 코드 2 · 코드 3 · 코드 4
GPT-Neo 125M + Self-Sampling
Accuracy
7.5
Parameters (Billion)
0.125
Learning Math Reasoning from Self-Sampled Correct and Partially-Correct Solutions
2022-05-28
코드 1
UL2 20B (chain-of-thought)
Accuracy
4.4
Parameters (Billion)
20
UL2: Unifying Language Learning Paradigms
2022-05-10
코드 1 · 코드 2
PaLM 8B (8-shot)
Accuracy
4.1
Parameters (Billion)
8
Solving Quantitative Reasoning Problems with Language Models
2022-06-29
코드 1
UL2 20B (0-shot)
Accuracy
4.1
Parameters (Billion)
20
UL2: Unifying Language Learning Paradigms
2022-05-10
코드 1 · 코드 2