← Question Answering
Papers with Code · CC BY-SA 4.0

HotpotQA

아카이브 평가 71건 · 마지막 적재/변경

평가 기록

과거 수집 기록이며 최신 순위가 아닙니다. 데이터셋 버전·split·실험 조건과 지표 방향이 검증되지 않은 결과는 직접 비교할 수 없습니다. 날짜는 논문 날짜이며 최신 평가일을 뜻하지 않습니다.

표가 화면보다 넓으면 좌우로 스크롤하여 논문과 구현 링크를 확인하세요.

원본 기록 순서 · 순위 미부여
모델원본 지표·값논문구현
RoBERTa-DenseRetriever
ANS-EM
0.596
ANS-F1
0.724
SUP-EM
0.479
SUP-F1
0.748
JOINT-EM
0.345
JOINT-F1
0.601
연결 없음
논문 날짜 미기재
연결 없음
HGN + SemanticRetrievalMRS IR
ANS-EM
0.567
ANS-F1
0.692
SUP-EM
0.500
SUP-F1
0.764
JOINT-EM
0.356
JOINT-F1
0.599
Hierarchical Graph Network for Multi-hop Question Answering
2019-11-09
코드 1
DFGN
JOINT-F1
0.5982
Dynamically Fused Graph Network for Multi-hop Reasoning
2019-05-16
코드 1
SAFSR model
ANS-EM
0.589
ANS-F1
0.716
SUP-EM
0.480
SUP-F1
0.757
JOINT-EM
0.345
JOINT-F1
0.598
HotpotQA: A Dataset for Diverse, Explainable Multi-hop Question Answering
2018-09-25
코드 1 · 코드 2
GraphRR-Fast
ANS-EM
0.582
ANS-F1
0.709
SUP-EM
0.429
SUP-F1
0.713
JOINT-EM
0.310
JOINT-F1
0.569
연결 없음
논문 날짜 미기재
연결 없음
DR model
ANS-EM
0.588
ANS-F1
0.717
SUP-EM
0.416
SUP-F1
0.725
JOINT-EM
0.293
JOINT-F1
0.568
연결 없음
논문 날짜 미기재
연결 없음
Quark + SemanticRetrievalMRS IR
ANS-EM
0.555
ANS-F1
0.675
SUP-EM
0.456
SUP-F1
0.730
JOINT-EM
0.329
JOINT-F1
0.562
A Simple Yet Strong Pipeline for HotpotQA
2020-04-14
연결 없음
GAR-BERT
ANS-EM
0.523
ANS-F1
0.648
SUP-EM
0.490
SUP-F1
0.747
JOINT-EM
0.330
JOINT-F1
0.561
연결 없음
논문 날짜 미기재
연결 없음
Graph-based Recurrent Retriever
ANS-EM
0.560
ANS-F1
0.689
SUP-EM
0.441
SUP-F1
0.730
JOINT-EM
0.292
JOINT-F1
0.553
연결 없음
논문 날짜 미기재
연결 없음
MIR+EPS+BERT
ANS-EM
0.529
ANS-F1
0.648
SUP-EM
0.428
SUP-F1
0.720
JOINT-EM
0.312
JOINT-F1
0.548
연결 없음
논문 날짜 미기재
연결 없음
GAR
ANS-EM
0.482
ANS-F1
0.613
SUP-EM
0.483
SUP-F1
0.739
JOINT-EM
0.306
JOINT-F1
0.530
연결 없음
논문 날짜 미기재
연결 없음
Transformer-XH-final
ANS-EM
0.516
ANS-F1
0.641
SUP-EM
0.409
SUP-F1
0.714
JOINT-EM
0.261
JOINT-F1
0.513
Transformer-XH: Multi-Evidence Reasoning with eXtra Hop Attention
2020-05-01
코드 1
Transformer-XH
ANS-EM
0.490
ANS-F1
0.608
SUP-EM
0.417
SUP-F1
0.700
JOINT-EM
0.271
JOINT-F1
0.496
연결 없음
논문 날짜 미기재
연결 없음
SemanticRetrievalMRS
ANS-EM
0.453
ANS-F1
0.573
SUP-EM
0.387
SUP-F1
0.708
JOINT-EM
0.251
JOINT-F1
0.476
Revealing the Importance of Semantic Retrieval for Machine Reading at Scale
2019-09-17
코드 1 · 코드 2
DrKIT
ANS-EM
0.421
ANS-F1
0.517
SUP-EM
0.371
SUP-F1
0.598
JOINT-EM
0.247
JOINT-F1
0.429
연결 없음
논문 날짜 미기재
연결 없음
Entity-centric BERT Pipeline
ANS-EM
0.418
ANS-F1
0.531
SUP-EM
0.263
SUP-F1
0.573
JOINT-EM
0.170
JOINT-F1
0.392
연결 없음
논문 날짜 미기재
연결 없음
PR-Bert
ANS-EM
0.433
ANS-F1
0.538
SUP-EM
0.219
SUP-F1
0.596
JOINT-EM
0.145
JOINT-F1
0.391
연결 없음
논문 날짜 미기재
연결 없음
GoldEn Retriever
ANS-EM
0.379
ANS-F1
0.486
SUP-EM
0.307
SUP-F1
0.642
JOINT-EM
0.180
JOINT-F1
0.391
Answering Complex Open-domain Questions Through Iterative Query Generation
2019-10-15
코드 1
SAFSr-Bert
ANS-EM
0.394
ANS-F1
0.514
SUP-EM
0.242
SUP-F1
0.585
JOINT-EM
0.133
JOINT-F1
0.370
연결 없음
논문 날짜 미기재
연결 없음
Cognitive Graph QA
ANS-EM
0.371
ANS-F1
0.489
SUP-EM
0.228
SUP-F1
0.577
JOINT-EM
0.124
JOINT-F1
0.349
Cognitive Graph for Multi-Hop Reading Comprehension at Scale
2019-05-14
코드 1 · 코드 2
GAR-NOSF
ANS-EM
0.475
ANS-F1
0.606
SUP-EM
0.076
SUP-F1
0.448
JOINT-EM
0.049
JOINT-F1
0.334
연결 없음
논문 날짜 미기재
연결 없음
IKFGraph
ANS-EM
0.358
ANS-F1
0.453
SUP-EM
0.160
SUP-F1
0.512
JOINT-EM
0.115
JOINT-F1
0.304
연결 없음
논문 날짜 미기재
연결 없음
AnonymousQ
ANS-EM
0.369
ANS-F1
0.460
SUP-EM
0.153
SUP-F1
0.468
JOINT-EM
0.115
JOINT-F1
0.291
연결 없음
논문 날짜 미기재
연결 없음
HGN Model-reproduce
ANS-EM
0.335
ANS-F1
0.427
SUP-EM
0.156
SUP-F1
0.493
JOINT-EM
0.110
JOINT-F1
0.284
연결 없음
논문 날짜 미기재
연결 없음
MUPPET
ANS-EM
0.306
ANS-F1
0.403
SUP-EM
0.167
SUP-F1
0.473
JOINT-EM
0.109
JOINT-F1
0.270
Multi-Hop Paragraph Retrieval for Open-Domain Question Answering
2019-06-15
코드 1
GRN + BERT
ANS-EM
0.299
ANS-F1
0.391
SUP-EM
0.132
SUP-F1
0.497
JOINT-EM
0.083
JOINT-F1
0.258
연결 없음
논문 날짜 미기재
연결 없음
Entity-centric IR
ANS-EM
0.354
ANS-F1
0.463
SUP-EM
0.001
SUP-F1
0.432
JOINT-EM
0.000
JOINT-F1
0.255
연결 없음
논문 날짜 미기재
연결 없음
KGNN
ANS-EM
0.277
ANS-F1
0.372
SUP-EM
0.127
SUP-F1
0.472
JOINT-EM
0.070
JOINT-F1
0.247
Multi-Paragraph Reasoning with Knowledge-enhanced Graph Neural Network
2019-11-06
연결 없음
SAQA
ANS-EM
0.284
ANS-F1
0.386
SUP-EM
0.147
SUP-F1
0.472
JOINT-EM
0.086
JOINT-F1
0.245
연결 없음
논문 날짜 미기재
연결 없음
GRN
ANS-EM
0.273
ANS-F1
0.365
SUP-EM
0.122
SUP-F1
0.488
JOINT-EM
0.074
JOINT-F1
0.236
연결 없음
논문 날짜 미기재
연결 없음