← Question Answering
Papers with Code · CC BY-SA 4.0

SQuAD1.1 dev

아카이브 평가 55건 · 마지막 적재/변경

평가 기록

과거 수집 기록이며 최신 순위가 아닙니다. 데이터셋 버전·split·실험 조건과 지표 방향이 검증되지 않은 결과는 직접 비교할 수 없습니다. 날짜는 논문 날짜이며 최신 평가일을 뜻하지 않습니다.

표가 화면보다 넓으면 좌우로 스크롤하여 논문과 구현 링크를 확인하세요.

원본 기록 순서 · 순위 미부여
모델원본 지표·값논문구현
PhaseCond (single)
EM
72.1
F1
81.4
Phase Conductor on Multi-layered Attentions for Machine Comprehension
2017-10-28
연결 없음
SRU
EM
71.4
F1
80.2
Simple Recurrent Units for Highly Parallelizable Recurrence
2017-09-08
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11
Smarnet
EM
71.362
F1
80.183
Smarnet: Teaching Machines to Read and Comprehend Like Human
2017-10-08
연결 없음
DCN (Char + CoVe)
EM
71.3
F1
79.9
Learned in Translation: Contextualized Word Vectors
2017-08-01
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5
R-NET (single)
EM
71.1
F1
79.5
Gated Self-Matching Networks for Reading Comprehension and Question Answering
2017-07-01
연결 없음
Ruminating Reader
EM
70.6
F1
79.5
Ruminating Reader: Reasoning with Gated Multi-Hop Attention
2017-04-24
연결 없음
FastQAExt (beam-size 5)
EM
70.3
F1
78.5
Making Neural QA as Simple as Possible but not Simpler
2017-03-14
코드 1 · 코드 2 · 코드 3
DrQA (Document Reader only)
EM
69.5
F1
78.8
Reading Wikipedia to Answer Open-Domain Questions
2017-03-31
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10
jNet (TreeLSTM adaptation, QTLa, K=100)
EM
69.10
F1
78.38
Exploring Question Understanding and Adaptation in Neural-Network-Based Question Answering
2017-03-14
연결 없음
SEDT-LSTM
EM
67.89
F1
77.42
Structural Embedding of Syntactic Trees for Machine Comprehension
2017-03-02
연결 없음
BIDAF (single)
EM
67.7
F1
77.3
Bidirectional Attention Flow for Machine Comprehension
2016-11-05
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27
SECT-LSTM
EM
67.65
F1
77.19
Structural Embedding of Syntactic Trees for Machine Comprehension
2017-03-02
연결 없음
RASOR
EM
66.4
F1
74.9
Learning Recurrent Span Representations for Extractive Question Answering
2016-11-04
코드 1 · 코드 2
MPCM
EM
66.1
F1
75.8
Multi-Perspective Context Matching for Machine Comprehension
2016-12-13
코드 1
DCN
EM
65.4
F1
75.6
Dynamic Coattention Networks For Question Answering
2016-11-05
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6
FABIR
EM
65.1
F1
75.6
A Fully Attention-Based Information Retriever
2018-10-22
코드 1
Match-LSTM with Bi-Ans-Ptr (Boundary+Search+b)
EM
64.1
F1
64.7
Machine Comprehension Using Match-LSTM and Answer Pointer
2016-08-29
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5
OTF dict+spelling (single)
EM
63.06
Learning to Compute Word Embeddings On the Fly
2017-06-01
연결 없음
DCR
EM
62.5
F1
71.2
End-to-End Answer Chunk Extraction and Ranking for Reading Comprehension
2016-10-31
연결 없음
FG fine-grained gate
EM
59.95
F1
71.25
Words or Characters? Fine-grained Gating for Reading Comprehension
2016-11-06
코드 1
LUKE 483M
F1
95
LUKE: Deep Contextualized Entity Representations with Entity-aware Self-attention
2020-10-02
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9
BART Base (with text infilling)
F1
90.8
BART: Denoising Sequence-to-Sequence Pre-training for Natural Language Generation, Translation, and Comprehension
2019-10-29
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47
BERT large (LAMB optimizer)
F1
90.584
Large Batch Optimization for Deep Learning: Training BERT in 76 minutes
2019-04-01
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32
DistilBERT 66M
F1
85.8
DistilBERT, a distilled version of BERT: smaller, faster, cheaper and lighter
2019-10-02
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37
BiDAF + Self Attention + ELMo
F1
85.6
Deep contextualized word representations
2018-02-15
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46