← Sentence Completion
Papers with Code · CC BY-SA 4.0

HellaSwag

아카이브 평가 89건 · 마지막 적재/변경

평가 기록

과거 수집 기록이며 최신 순위가 아닙니다. 데이터셋 버전·split·실험 조건과 지표 방향이 검증되지 않은 결과는 직접 비교할 수 없습니다. 날짜는 논문 날짜이며 최신 평가일을 뜻하지 않습니다.

표가 화면보다 넓으면 좌우로 스크롤하여 논문과 구현 링크를 확인하세요.

원본 기록 순서 · 순위 미부여
모델원본 지표·값논문구현
CompassMTL 567M with Tailor
Accuracy
96.1
Task Compass: Scaling Multi-task Pre-training with Task Prefix
2022-10-12
코드 1
CompassMTL 567M
Accuracy
95.6
Task Compass: Scaling Multi-task Pre-training with Task Prefix
2022-10-12
코드 1
DeBERTa-Large 304M (classification-based)
Accuracy
95.6
Two is Better than Many? Binary Classification as an Effective Approach to Multi-Choice Question Answering
2022-10-29
코드 1
GPT-4 (10-shot)
Accuracy
95.3
GPT-4 Technical Report
2023-03-15
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11
LLaMA3+MoSLoRA
Accuracy
95.0
Mixture-of-Subspaces in Low-Rank Adaptation
2024-06-16
코드 1
DeBERTa-Large 304M
Accuracy
94.7
Two is Better than Many? Binary Classification as an Effective Approach to Multi-Choice Question Answering
2022-10-29
코드 1
LLaMA-2 13B + MixLoRA
Accuracy
94.7
MixLoRA: Enhancing Large Language Models Fine-Tuning with LoRA-based Mixture of Experts
2024-04-22
코드 1 · 코드 2
Unicorn 11B (fine-tuned)
Accuracy
93.9
UNICORN on RAINBOW: A Universal Commonsense Reasoning Model on a New Multitask Benchmark
2021-03-24
코드 1
LLaMA-3 8B + MixLoRA
Accuracy
93.3
MixLoRA: Enhancing Large Language Models Fine-Tuning with LoRA-based Mixture of Experts
2024-04-22
코드 1 · 코드 2
LLaMA-2 7B + MixLoRA
Accuracy
93.1
MixLoRA: Enhancing Large Language Models Fine-Tuning with LoRA-based Mixture of Experts
2024-04-22
코드 1 · 코드 2
DeBERTa++
Accuracy
93
DeBERTa: Decoding-enhanced BERT with Disentangled Attention
2020-06-05
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14
ELECTRA-Large 335M (fine-tuned on DiscoSense and HellaSwag)
Accuracy
91.5
DiscoSense: Commonsense Reasoning with Discourse Connectives
2022-10-22
코드 1
DBRX Instruct 132B (10-shot)
Accuracy
89
연결 없음
논문 날짜 미기재
연결 없음
TheBloke/llama-2-70b-Guanaco-QLoRA-fp16 (10-shot)
Accuracy
88.3
연결 없음
논문 날짜 미기재
연결 없음
ALBERT-XXL 235M
Accuracy
88
연결 없음
논문 날짜 미기재
연결 없음
PaLM 2-L (1-shot)
Accuracy
87.4
PaLM 2 Technical Report
2023-05-17
코드 1
ELECTRA-Large 335M (fine-tuned on HellaSwag)
Accuracy
86.9
DiscoSense: Commonsense Reasoning with Discourse Connectives
2022-10-22
코드 1
PaLM 2-M (1-shot)
Accuracy
86.7
PaLM 2 Technical Report
2023-05-17
코드 1
MUPPET Roberta Large
Accuracy
86.4
Muppet: Massive Multi-task Representations with Pre-Finetuning
2021-01-26
코드 1 · 코드 2
LLaMA 65B + CFG (0-shot)
Accuracy
86.3
Stay on topic with Classifier-Free Guidance
2023-06-30
연결 없음
Falcon-180B (0-shot)
Accuracy
85.9
The Falcon Series of Open Language Models
2023-11-28
연결 없음
PaLM 2-S (1-shot)
Accuracy
85.6
PaLM 2 Technical Report
2023-05-17
코드 1
GPT-3.5 (10-shot)
Accuracy
85.5
GPT-4 Technical Report
2023-03-15
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11
RoBERTa-Large Ensemble
Accuracy
85.5
RoBERTa: A Robustly Optimized BERT Pretraining Approach
2019-07-26
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57 · 코드 58 · 코드 59 · 코드 60 · 코드 61 · 코드 62 · 코드 63 · 코드 64 · 코드 65 · 코드 66 · 코드 67
LLaMA 30B + CFG (0-shot)
Accuracy
85.3
Stay on topic with Classifier-Free Guidance
2023-06-30
연결 없음
LLaMA 2 70B (0-shot)
Accuracy
85.3
Llama 2: Open Foundation and Fine-Tuned Chat Models
2023-07-18
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19
HyKAS+CSKG
Accuracy
85.0
Towards Generalizable Neuro-Symbolic Systems for Commonsense Question Answering
2019-10-30
연결 없음
LLaMA 65B (0-shot)
Accuracy
84.2
LLaMA: Open and Efficient Foundation Language Models
2023-02-27
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57
PaLM-540B (Few-Shot)
Accuracy
83.8
PaLM: Scaling Language Modeling with Pathways
2022-04-05
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7
PaLM-540B (1-shot)
Accuracy
83.6
PaLM: Scaling Language Modeling with Pathways
2022-04-05
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7