← Question Answering
Papers with Code · CC BY-SA 4.0

PIQA

아카이브 평가 67건 · 마지막 적재/변경

평가 기록

과거 수집 기록이며 최신 순위가 아닙니다. 데이터셋 버전·split·실험 조건과 지표 방향이 검증되지 않은 결과는 직접 비교할 수 없습니다. 날짜는 논문 날짜이며 최신 평가일을 뜻하지 않습니다.

표가 화면보다 넓으면 좌우로 스크롤하여 논문과 구현 링크를 확인하세요.

원본 기록 순서 · 순위 미부여
모델원본 지표·값논문구현
FLAN 137B (0-shot)
Accuracy
80.5
Finetuned Language Models Are Zero-Shot Learners
2021-09-03
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8
LLaMA 2 13B (0-shot)
Accuracy
80.5
Llama 2: Open Foundation and Fine-Tuned Chat Models
2023-07-18
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19
LLaMA 13B (0-shot)
Accuracy
80.1
LLaMA: Open and Efficient Foundation Language Models
2023-02-27
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57
LLaMA 7B (0-shot)
Accuracy
79.8
LLaMA: Open and Efficient Foundation Language Models
2023-02-27
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57
SparseGPT 175B (4:8 Sparsity)
Accuracy
79.54
SparseGPT: Massive Language Models Can Be Accurately Pruned in One-Shot
2023-01-02
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6
SparseGPT 175B (2:4 Sparsity)
Accuracy
79.54
SparseGPT: Massive Language Models Can Be Accurately Pruned in One-Shot
2023-01-02
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6
RoBERTa-Large 355M
Accuracy
79.4
RoBERTa: A Robustly Optimized BERT Pretraining Approach
2019-07-26
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57 · 코드 58 · 코드 59 · 코드 60 · 코드 61 · 코드 62 · 코드 63 · 코드 64 · 코드 65 · 코드 66 · 코드 67
LLaMA 2 7B (0-shot)
Accuracy
78.8
Llama 2: Open Foundation and Fine-Tuned Chat Models
2023-07-18
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19
Bloomberg GPT 50B (1-shot)
Accuracy
77.9
BloombergGPT: A Large Language Model for Finance
2023-03-30
코드 1 · 코드 2
OPT 66B (1-shot)
Accuracy
77.6
BloombergGPT: A Large Language Model for Finance
2023-03-30
코드 1 · 코드 2
RoBERTa-large 355M (fine-tuned)
Accuracy
77.1
PIQA: Reasoning about Physical Commonsense in Natural Language
2019-11-26
코드 1 · 코드 2
phi-1.5-web (1.3B)
Accuracy
77
Textbooks Are All You Need II: phi-1.5 technical report
2023-09-11
코드 1
BLOOM 176B (1-shot)
Accuracy
77
BloombergGPT: A Large Language Model for Finance
2023-03-30
코드 1 · 코드 2
Pythia 12B (5-shot)
Accuracy
76.7
Pythia: A Suite for Analyzing Large Language Models Across Training and Scaling
2023-04-03
코드 1 · 코드 2 · 코드 3 · 코드 4
Open-LLaMA-3B-v2
Accuracy
76.2
Sheared LLaMA: Accelerating Language Model Pre-training via Structured Pruning
2023-10-10
코드 1 · 코드 2
Pythia 12B (0-shot)
Accuracy
76
Pythia: A Suite for Analyzing Large Language Models Across Training and Scaling
2023-04-03
코드 1 · 코드 2 · 코드 3 · 코드 4
Sheared-LLaMA-2.7B
Accuracy
75.8
Sheared LLaMA: Accelerating Language Model Pre-training via Structured Pruning
2023-10-10
코드 1 · 코드 2
GPT-NeoX 20B (1-shot)
Accuracy
75.8
BloombergGPT: A Large Language Model for Finance
2023-03-30
코드 1 · 코드 2
Pythia 6.9B (0-shot)
Accuracy
75.2
Pythia: A Suite for Analyzing Large Language Models Across Training and Scaling
2023-04-03
코드 1 · 코드 2 · 코드 3 · 코드 4
Sheared-LLaMA-1.3B
Accuracy
73.4
Sheared LLaMA: Accelerating Language Model Pre-training via Structured Pruning
2023-10-10
코드 1 · 코드 2
sMLP - deterministic 9.4B (0-shot)
Accuracy
73
Efficient Language Modeling with Sparse all-MLP
2022-03-14
연결 없음
GPT-3 Large 760M (0-shot)
Accuracy
72.9
Language Models are Few-Shot Learners
2020-05-28
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57 · 코드 58 · 코드 59 · 코드 60 · 코드 61 · 코드 62 · 코드 63 · 코드 64 · 코드 65 · 코드 66 · 코드 67
FLAN-T5-Large 783M
Accuracy
72.2
LaMini-LM: A Diverse Herd of Distilled Models from Large-Scale Instructions
2023-04-27
코드 1
LaMini-GPT 1.5B
Accuracy
71.3
LaMini-LM: A Diverse Herd of Distilled Models from Large-Scale Instructions
2023-04-27
코드 1
LaMini-F-T5 783M
Accuracy
70.6
LaMini-LM: A Diverse Herd of Distilled Models from Large-Scale Instructions
2023-04-27
코드 1
GPT-2-XL 1.5B
Accuracy
70.5
LaMini-LM: A Diverse Herd of Distilled Models from Large-Scale Instructions
2023-04-27
코드 1
Pythia 1B (5-shot)
Accuracy
70.4
Pythia: A Suite for Analyzing Large Language Models Across Training and Scaling
2023-04-03
코드 1 · 코드 2 · 코드 3 · 코드 4
GPT-2-small 124M (fine-tuned)
Accuracy
69.2
PIQA: Reasoning about Physical Commonsense in Natural Language
2019-11-26
코드 1 · 코드 2
Gshard 9B
Accuracy
68.1
Efficient Language Modeling with Sparse all-MLP
2022-03-14
연결 없음
LaMini-T5 738M
Accuracy
67.2
LaMini-LM: A Diverse Herd of Distilled Models from Large-Scale Instructions
2023-04-27
코드 1