| GPT-4o (HPT) |
- Accuracy
- 92.54
|
Hierarchical Prompting Taxonomy: A Universal Evaluation Framework for Large Language Models Aligned with Human Cognitive Principles 2024-06-18 |
코드 1 |
| DeBERTaV3-large+KEAR |
- Accuracy
- 91.2
|
Human Parity on CommonsenseQA: Augmenting Self-Attention with External Attention 2021-12-06 |
코드 1 · 코드 2 |
| PaLM 2 (few‑shot, CoT, SC) |
- Accuracy
- 90.4
|
PaLM 2 Technical Report 2023-05-17 |
코드 1 |
| KEAR |
- Accuracy
- 89.4
|
Human Parity on CommonsenseQA: Augmenting Self-Attention with External Attention 2021-12-06 |
코드 1 · 코드 2 |
| DEKCOR |
- Accuracy
- 83.3
|
Fusing Context Into Knowledge Graph for Commonsense Question Answering 2020-12-09 |
코드 1 · 코드 2 |
| Unicorn 11B (fine-tuned) |
- Accuracy
- 79.3
|
UNICORN on RAINBOW: A Universal Commonsense Reasoning Model on a New Multitask Benchmark 2021-03-24 |
코드 1 |
| MUPPET Roberta Large |
- Accuracy
- 79.2
|
Muppet: Massive Multi-task Representations with Pre-Finetuning 2021-01-26 |
코드 1 · 코드 2 |
| UnifiedQA 11B (fine-tuned) |
- Accuracy
- 79.1
|
UnifiedQA: Crossing Format Boundaries With a Single QA System 2020-05-02 |
코드 1 · 코드 2 |
| DRAGON |
- Accuracy
- 78.2
|
Deep Bidirectional Language-Knowledge Graph Pretraining 2022-10-17 |
코드 1 · 코드 2 |
| T5-XXL 11B (fine-tuned) |
- Accuracy
- 78.1
|
UnifiedQA: Crossing Format Boundaries With a Single QA System 2020-05-02 |
코드 1 · 코드 2 |
| Albert Lan et al. (2020) (ensemble) |
- Accuracy
- 76.5
|
ALBERT: A Lite BERT for Self-supervised Learning of Language Representations 2019-09-26 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 |
| UnifiedQA 11B (zero-shot) |
- Accuracy
- 76.2
|
UnifiedQA: Crossing Format Boundaries With a Single QA System 2020-05-02 |
코드 1 · 코드 2 |
| QA-GNN |
- Accuracy
- 76.1
|
QA-GNN: Reasoning with Language Models and Knowledge Graphs for Question Answering 2021-04-13 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 |
| XLNet+GraphReason |
- Accuracy
- 75.3
|
Graph-Based Reasoning over Heterogeneous External Knowledge for Commonsense Question Answering 2019-09-09 |
코드 1 |
| GrapeQA: PEGA |
- Accuracy
- 73.5
|
GrapeQA: GRaph Augmentation and Pruning to Enhance Question-Answering 2023-03-22 |
연결 없음 |
| RoBERTa+HyKAS Ma et al. (2019) |
- Accuracy
- 73.2
|
Towards Generalizable Neuro-Symbolic Systems for Commonsense Question Answering 2019-10-30 |
연결 없음 |
| GPT-3 Direct Finetuned |
- Accuracy
- 73.0
|
Human Parity on CommonsenseQA: Augmenting Self-Attention with External Attention 2021-12-06 |
코드 1 · 코드 2 |
| STaR (on GPT-J) |
- Accuracy
- 72.3
|
STaR: Bootstrapping Reasoning With Reasoning 2022-03-28 |
코드 1 |
| RoBERTa-Large 355M |
- Accuracy
- 72.1
|
RoBERTa: A Robustly Optimized BERT Pretraining Approach 2019-07-26 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57 · 코드 58 · 코드 59 · 코드 60 · 코드 61 · 코드 62 · 코드 63 · 코드 64 · 코드 65 · 코드 66 · 코드 67 |
| STaR without Rationalization (on GPT-J) |
- Accuracy
- 68.8
|
STaR: Bootstrapping Reasoning With Reasoning 2022-03-28 |
코드 1 |
| OPT 66B (1-shot) |
- Accuracy
- 66.4
|
BloombergGPT: A Large Language Model for Finance 2023-03-30 |
코드 1 · 코드 2 |
| Bloomberg GPT 50B (1-shot) |
- Accuracy
- 65.5
|
BloombergGPT: A Large Language Model for Finance 2023-03-30 |
코드 1 · 코드 2 |
| CAGE-reasoning |
- Accuracy
- 64.7
|
Explain Yourself! Leveraging Language Models for Commonsense Reasoning 2019-06-06 |
코드 1 |
| BLOOM 176B (1-shot) |
- Accuracy
- 64.2
|
BloombergGPT: A Large Language Model for Finance 2023-03-30 |
코드 1 · 코드 2 |
| UnifiedQA 440M (fine-tuned) |
- Accuracy
- 64
|
UnifiedQA: Crossing Format Boundaries With a Single QA System 2020-05-02 |
코드 1 · 코드 2 |
| BART-large 440M (fine-tuned) |
- Accuracy
- 62.5
|
UnifiedQA: Crossing Format Boundaries With a Single QA System 2020-05-02 |
코드 1 · 코드 2 |
| BERT_CSlarge |
- Accuracy
- 62.2
|
Align, Mask and Select: A Simple Method for Incorporating Commonsense Knowledge into Language Representation Models 2019-08-19 |
연결 없음 |
| GPT-NeoX 20B (1-shot) |
- Accuracy
- 60.4
|
BloombergGPT: A Large Language Model for Finance 2023-03-30 |
코드 1 · 코드 2 |
| GPT-J Direct Finetuned |
- Accuracy
- 60.0
|
STaR: Bootstrapping Reasoning With Reasoning 2022-03-28 |
코드 1 |
| KagNet |
- Accuracy
- 58.9
|
KagNet: Knowledge-Aware Graph Networks for Commonsense Reasoning 2019-09-04 |
코드 1 · 코드 2 |