← Question Answering
Papers with Code · CC BY-SA 4.0

Natural Questions

아카이브 평가 47건 · 마지막 적재/변경

평가 기록

과거 수집 기록이며 최신 순위가 아닙니다. 데이터셋 버전·split·실험 조건과 지표 방향이 검증되지 않은 결과는 직접 비교할 수 없습니다. 날짜는 논문 날짜이며 최신 평가일을 뜻하지 않습니다.

표가 화면보다 넓으면 좌우로 스크롤하여 논문과 구현 링크를 확인하세요.

원본 기록 순서 · 순위 미부여
모델원본 지표·값논문구현
Atlas (full, Wiki-dec-2018 index)
EM
64.0
Atlas: Few-shot Learning with Retrieval Augmented Language Models
2022-08-05
코드 1 · 코드 2
Atlas (full, Wiki-dec-2021+CC index)
EM
60.4
Atlas: Few-shot Learning with Retrieval Augmented Language Models
2022-08-05
코드 1 · 코드 2
DPA-RAG
EM
59.19
Understand What LLM Needs: Dual Preference Alignment for Retrieval-Augmented Generation
2024-06-26
코드 1
FiE
EM
58.4
FiE: Building a Global Probability Space by Leveraging Early Fusion in Encoder for Open-Domain Question Answering
2022-11-18
연결 없음
R2-D2 (full)
EM
55.9
R2-D2: A Modular Baseline for Open-Domain Question Answering
2021-09-08
코드 1
ReAtt
EM
54.7
Retrieval as Attention: End-to-end Learning of Retrieval and Reading within a Single Transformer
2022-12-05
코드 1
FiD-KD (full)
EM
54.7
Leveraging Passage Retrieval with Generative Models for Open Domain Question Answering
2020-07-02
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8
RankRAG-llama3-70b (Zero-Shot, KILT)
EM
54.2
RankRAG: Unifying Context Ranking with Retrieval-Augmented Generation in LLMs
2024-07-02
연결 없음
EMDR^2
EM
52.5
End-to-End Training of Multi-Document Reader and Retriever for Open-Domain Question Answering
2021-06-09
코드 1 · 코드 2
FID (full)
EM
51.4
Leveraging Passage Retrieval with Generative Models for Open Domain Question Answering
2020-07-02
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8
RankRAG-llama3-8b (Zero-Shot, KILT)
EM
50.6
RankRAG: Unifying Context Ranking with Retrieval-Augmented Generation in LLMs
2024-07-02
연결 없음
RankRAG-llama3-70b (Zero-Shot, DPR)
EM
50.0
RankRAG: Unifying Context Ranking with Retrieval-Augmented Generation in LLMs
2024-07-02
연결 없음
ChatQA-1.5-llama3-70b (Zero-Shot, KILT)
EM
47.0
ChatQA: Surpassing GPT-4 on Conversational QA and RAG
2024-01-18
연결 없음
RankRAG-llama3-8b (Zero-Shot, DPR)
EM
46.1
RankRAG: Unifying Context Ranking with Retrieval-Augmented Generation in LLMs
2024-07-02
연결 없음
RETRO + DPR (full)
EM
45.5
Improving language models by retrieving from trillions of tokens
2021-12-08
코드 1 · 코드 2
code-davinci-002 175B + REPLUG LSR (few-shot)
EM
45.5
REPLUG: Retrieval-Augmented Black-Box Language Models
2023-01-30
코드 1 · 코드 2 · 코드 3
Atlas (few-shot, k=64, Wiki-Dec-2018 index)
EM
45.1
Atlas: Few-shot Learning with Retrieval Augmented Language Models
2022-08-05
코드 1 · 코드 2
code-davinci-002 175B + REPLUG (few-shot)
EM
44.7
REPLUG: Retrieval-Augmented Black-Box Language Models
2023-01-30
코드 1 · 코드 2 · 코드 3
RAG
EM
44.5
Retrieval-Augmented Generation for Knowledge-Intensive NLP Tasks
2020-05-22
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18
ChatQA-1.5-llama3-8b (Zero-Shot, KILT)
EM
42.7
ChatQA: Surpassing GPT-4 on Conversational QA and RAG
2024-01-18
연결 없음
Blended RAG
EM
42.63
Blended RAG: Improving RAG (Retriever-Augmented Generation) Accuracy with Semantic Search and Hybrid Query-Based Retrievers
2024-03-22
코드 1
Atlas (few-shot, k=64, Wiki-dec-2021+CC index)
EM
42.4
Atlas: Few-shot Learning with Retrieval Augmented Language Models
2022-08-05
코드 1 · 코드 2
DPR
EM
41.5
Dense Passage Retrieval for Open-Domain Question Answering
2020-04-10
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19
REALM
EM
40.4
REALM: Retrieval-Augmented Language Model Pre-Training
2020-02-10
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6
LLaMA 65B (few-shot, k=64)
EM
39.9
LLaMA: Open and Efficient Foundation Language Models
2023-02-27
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57
PaLM-540B (Few-Shot, k=64)
EM
39.6
PaLM: Scaling Language Modeling with Pathways
2022-04-05
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7
PaLM 2-L (one-shot)
EM
37.5
PaLM 2 Technical Report
2023-05-17
코드 1
Chinchilla (few-shot, k=64)
EM
35.5
Training Compute-Optimal Large Language Models
2022-03-29
코드 1 · 코드 2
LLaMA 65B (few-shot, k=5)
EM
35.0
LLaMA: Open and Efficient Foundation Language Models
2023-02-27
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57
Search-o1
EM
34
Search-o1: Agentic Search-Enhanced Large Reasoning Models
2025-01-09
코드 1 · 코드 2