| GPT-3 175B (Few-Shot) |
- EM
- 71.2
|
Language Models are Few-Shot Learners
2020-05-28 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57 · 코드 58 · 코드 59 · 코드 60 · 코드 61 · 코드 62 · 코드 63 · 코드 64 · 코드 65 · 코드 66 · 코드 67 |
| Mistral 7B (5-shot) |
- EM
- 69.9
|
Mistral 7B
2023-10-10 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 |
| ChatQA-1.5-llama3-70b (Zero-Shot, DPR) |
- EM
- 69.0
|
ChatQA: Surpassing GPT-4 on Conversational QA and RAG
2024-01-18 |
연결 없음 |
| LLaMA 65B (zero-shot) |
- EM
- 68.2
|
LLaMA: Open and Efficient Foundation Language Models
2023-02-27 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57 |
| Fusion-in-Decoder (large) |
- EM
- 67.6
|
Leveraging Passage Retrieval with Generative Models for Open Domain Question Answering
2020-07-02 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 |
| MemoReader |
- EM
- 67.21
- F1
- 73.26
|
MemoReader: Large-Scale Reading Comprehension through Neural Memory Controller
2018-10-01 |
연결 없음 |
| S-Norm |
- EM
- 66.37
- F1
- 71.32
|
Simple and Effective Multi-Paragraph Reading Comprehension
2017-10-29 |
코드 1 |
| TOME-2 |
- EM
- 65.8
|
Mention Memory: incorporating textual knowledge into Transformers through entity mention attention
2021-10-12 |
코드 1 |
| Shakti-LLM (2.5B) |
- EM
- 58.2
|
SHAKTI: A 2.5 Billion Parameter Small Language Model Optimized for Edge AI and Low-Resource Environments
2024-10-15 |
연결 없음 |
| Branch-Train-MiX 4x7B (sampling top-2 experts) |
- EM
- 57.1
|
Branch-Train-MiX: Mixing Expert LLMs into a Mixture-of-Experts LLM
2024-03-12 |
코드 1 |
| DPR |
- EM
- 56.8
|
Dense Passage Retrieval for Open-Domain Question Answering
2020-04-10 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 |
| FLAN 137B (zero-shot) |
- EM
- 56.7
|
Finetuned Language Models Are Zero-Shot Learners
2021-09-03 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 |
| RAG |
- EM
- 56.1
|
Retrieval-Augmented Generation for Knowledge-Intensive NLP Tasks
2020-05-22 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 |
| Reading Twice for NLU |
- EM
- 50.56
- F1
- 56.73
|
Dynamic Integration of Background Knowledge in Neural NLU Systems
2017-06-08 |
연결 없음 |
| Mnemonic Reader |
- EM
- 46.94
- F1
- 52.85
|
Reinforced Mnemonic Reader for Machine Reading Comprehension
2017-05-08 |
코드 1 · 코드 2 · 코드 3 |
| ORQA |
- EM
- 45
|
Latent Retrieval for Weakly Supervised Open Domain Question Answering
2019-06-01 |
코드 1 · 코드 2 · 코드 3 |
| MEMEN |
- EM
- 43.16
- F1
- 46.90
|
MEMEN: Multi-layer Embedding with Memory Networks for Machine Comprehension
2017-07-28 |
연결 없음 |
| SpanBERT |
- F1
- 83.6
|
SpanBERT: Improving Pre-training by Representing and Predicting Spans
2019-07-24 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 |
| BigBird-etc |
- F1
- 80.9
|
Big Bird: Transformers for Longer Sequences
2020-07-28 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 |
| DPA-RAG |
- F1
- 80.1
|
Understand What LLM Needs: Dual Preference Alignment for Retrieval-Augmented Generation
2024-06-26 |
코드 1 |
| LinkBERT (large) |
- F1
- 78.2
|
LinkBERT: Pretraining Language Models with Document Links
2022-03-29 |
코드 1 |
| DyREX |
- F1
- 77.37
|
DyREx: Dynamic Query Representation for Extractive Question Answering
2022-10-26 |
코드 1 |
| Search-o1 |
- F1
- 74.1
|
Search-o1: Agentic Search-Enhanced Large Reasoning Models
2025-01-09 |
코드 1 · 코드 2 |
| UnitedQA (Hybrid reader) |
- F1
- 70.3
|
UnitedQA: A Hybrid Approach for Open Domain Question Answering
2021-01-01 |
연결 없음 |
| ReasonBERTR |
- F1
- 45.5
|
ReasonBERT: Pre-trained to Reason with Distant Supervision
2021-09-10 |
코드 1 |
| ReasonBERTB |
- F1
- 37.2
|
ReasonBERT: Pre-trained to Reason with Distant Supervision
2021-09-10 |
코드 1 |