| Claude 2 (few-shot, k=5) |
- EM
- 87.5
|
Model Card and Evaluations for Claude Models
2023-07-11 |
연결 없음 |
| GPT-4-0613 |
- EM
- 87
|
연결 없음
논문 날짜 미기재 |
연결 없음 |
| Claude 1.3 (few-shot, k=5) |
- EM
- 86.7
|
Model Card and Evaluations for Claude Models
2023-07-11 |
연결 없음 |
| RankRAG-llama3-70b (Zero-Shot, KILT) |
- EM
- 86.5
|
RankRAG: Unifying Context Ranking with Retrieval-Augmented Generation in LLMs
2024-07-02 |
연결 없음 |
| PaLM 2-L (one-shot) |
- EM
- 86.1
|
PaLM 2 Technical Report
2023-05-17 |
코드 1 |
| ChatQA-1.5-llama3-70b (Zero-Shot, KILT) |
- EM
- 85.6
|
ChatQA: Surpassing GPT-4 on Conversational QA and RAG
2024-01-18 |
연결 없음 |
| LLaMA 2 70B (one-shot) |
- EM
- 85
|
Llama 2: Open Foundation and Fine-Tuned Chat Models
2023-07-18 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 |
| GPT-4-0613 (Zero-shot) |
- EM
- 84.8
|
GPT-4 Technical Report
2023-03-15 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 |
| RankRAG-llama3-8b (Zero-Shot, KILT) |
- EM
- 82.9
|
RankRAG: Unifying Context Ranking with Retrieval-Augmented Generation in LLMs
2024-07-02 |
연결 없음 |
| PaLM 2-M (one-shot) |
- EM
- 81.7
|
PaLM 2 Technical Report
2023-05-17 |
코드 1 |
| PaLM-540B (Few-Shot) |
- EM
- 81.4
|
PaLM: Scaling Language Modeling with Pathways
2022-04-05 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 |
| PaLM-540B (One-Shot) |
- EM
- 81.4
|
PaLM: Scaling Language Modeling with Pathways
2022-04-05 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 |
| ChatQA-1.5-llama3-8B (Zero-Shot, KILT) |
- EM
- 81.0
|
ChatQA: Surpassing GPT-4 on Conversational QA and RAG
2024-01-18 |
연결 없음 |
| GaC(Qwen2-72B-Instruct + Llama-3-70B-Instruct) |
- EM
- 79.29
|
Breaking the Ceiling of the LLM Community by Treating Token Generation as a Classification for Ensembling
2024-06-18 |
코드 1 |
| Claude Instant 1.1 (few-shot, k=5) |
- EM
- 78.9
|
Model Card and Evaluations for Claude Models
2023-07-11 |
연결 없음 |
| code-davinci-002 175B + REPLUG LSR (Few-Shot) |
- EM
- 77.3
|
REPLUG: Retrieval-Augmented Black-Box Language Models
2023-01-30 |
코드 1 · 코드 2 · 코드 3 |
| PaLM-540B (Zero-Shot) |
- EM
- 76.9
|
PaLM: Scaling Language Modeling with Pathways
2022-04-05 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 |
| code-davinci-002 175B + REPLUG (Few-Shot) |
- EM
- 76.8
|
REPLUG: Retrieval-Augmented Black-Box Language Models
2023-01-30 |
코드 1 · 코드 2 · 코드 3 |
| GLaM 62B/64E (One-shot) |
- EM
- 75.8
|
GLaM: Efficient Scaling of Language Models with Mixture-of-Experts
2021-12-13 |
연결 없음 |
| GLaM 62B/64E (Few-shot) |
- EM
- 75.8
|
GLaM: Efficient Scaling of Language Models with Mixture-of-Experts
2021-12-13 |
연결 없음 |
| RA-DIT (Zero-Shot) |
- EM
- 75.4
|
RA-DIT: Retrieval-Augmented Dual Instruction Tuning
2023-10-02 |
연결 없음 |
| PaLM 2-S (one-shot) |
- EM
- 75.2
|
PaLM 2 Technical Report
2023-05-17 |
코드 1 |
| LLaMA 65B (few-shot, k=64) |
- EM
- 73.0
|
LLaMA: Open and Efficient Foundation Language Models
2023-02-27 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57 |
| FiE+PAQ |
- EM
- 72.6
|
FiE: Building a Global Probability Space by Leveraging Early Fusion in Encoder for Open-Domain Question Answering
2022-11-18 |
연결 없음 |
| LLaMA 65B (few-shot, k=5) |
- EM
- 72.6
|
LLaMA: Open and Efficient Foundation Language Models
2023-02-27 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57 |
| RankRAG-llama3-70b (Zero-Shot, DPR) |
- EM
- 72.6
|
RankRAG: Unifying Context Ranking with Retrieval-Augmented Generation in LLMs
2024-07-02 |
연결 없음 |
| FiD+Distil |
- EM
- 72.1
|
Distilling Knowledge from Reader to Retriever for Question Answering
2020-12-08 |
코드 1 · 코드 2 · 코드 3 · 코드 4 |
| LLaMA 65B (one-shot) |
- EM
- 71.6
|
LLaMA: Open and Efficient Foundation Language Models
2023-02-27 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57 |
| EMDR2 |
- EM
- 71.4
|
End-to-End Training of Multi-Document Reader and Retriever for Open-Domain Question Answering
2021-06-09 |
코드 1 · 코드 2 |
| GLaM 62B/64E (Zero-shot) |
- EM
- 71.3
|
GLaM: Efficient Scaling of Language Models with Mixture-of-Experts
2021-12-13 |
연결 없음 |