Papers with Code · CC BY-SA 4.0

Relation Classification

37 평가 기록 12 datasets

Relation Classification is the task of identifying the semantic relation holding between two nominal entities in text.

<span class="description-source">Source: Structure Regularized Neural Network for Entity Relation Classification for Chinese Literature Text </span>

개요는 각 항목의 일부입니다. 위 탭에서 전체 기록을 페이지별로 탐색할 수 있습니다.

벤치마크

Papers with Code 아카이브의 데이터셋별 기록 예시입니다. 평가 조건과 지표 방향이 검증되지 않아 순위를 의미하지 않습니다.

Dataset기록된 모델 예시MetricPaperCode

TACRED

Deepstruct zero-shot

F1: 36.1

논문 코드

SemEval 2010 Task 8

BRCNN

F1: 86.3

논문 -

FewRel

DeepStruct multi-task w/ finetune

F1 (5-way 1-shot): 98.4F1 (5-way 5-shot: 100F1 (10-way 1-shot): 97.8F1 (10-way 5-shot): 99.8

논문 코드

AbstRCT - Neoplasm

ResAttArg

Macro F1: 70.92

논문 코드

CDCP

ResAttArg

Macro F1: 42.95

논문 코드

DRI Corpus

ResAttArg

Macro F1: 37.72

논문 코드

Discovery

BERT

1:1 Accuracy: 20.6

논문 코드

DocRED

DL-MNAV

F1 (1-Doc): 7.05F1 (3-Doc): 8.42

논문 코드

FREDo

DL-MNAV

F1 (1-Doc): 7.05F1 (3-Doc): 8.42

논문 코드

FREDo (cross-domain)

DL-MNAV+SIE+SBN

F1 (1-Doc): 2.85F1 (3-Doc): 3.72

논문 코드

MATRES

SCS-EERE

F1: 0.834

논문 코드

SciERC

DL-MNAV+SIE+SBN

F1 (1-Doc): 2.85F1 (3-Doc): 3.72

논문 코드

데이터셋

12개

TACRED SemEval 2010 Task 8 FewRel AbstRCT - Neoplasm CDCP DRI Corpus Discovery DocRED FREDo FREDo (cross-domain)MATRES SciERC

논문

ERNIE: Enhanced Language Representation with Informative Entities

1905.07129 2019-05-17 이 페이지의 평가 2건

F1: 66.0

DeepStruct: Pretraining of Language Models for Structure Prediction

2205.10475 2022-05-21 이 페이지의 평가 1건

F1: 36.1

Graph Convolution over Pruned Dependency Trees Improves Relation Extraction

1809.10185 2018-09-26 이 페이지의 평가 1건

F1: 66.4

K-Adapter: Infusing Knowledge into Pre-Trained Models with Adapters

2002.01808 2020-02-05 이 페이지의 평가 1건

F1: 71.3

KEPLER: A Unified Model for Knowledge Embedding and Pre-trained Language Representation

1911.06136 2019-11-13 이 페이지의 평가 1건

F1: 71.7

Knowledge Enhanced Contextual Word Representations

1909.04164 2019-09-09 이 페이지의 평가 1건

F1: 71.5

Matching the Blanks: Distributional Similarity for Relation Learning

1906.03158 2019-06-07 이 페이지의 평가 1건

F1: 71.5

Multi-Task Attentive Residual Networks for Argument Mining

2102.12227 2021-02-24 이 페이지의 평가 1건

Macro F1: 70.92

SpanBERT: Improving Pre-training by Representing and Predicting Spans

1907.10529 2019-07-24 이 페이지의 평가 1건

F1: 70.8

Structured Prediction as Translation between Augmented Natural Languages

2101.05779 2021-01-14 이 페이지의 평가 1건

F1: 61.9

Zero-Shot Information Extraction as a Unified Text-to-Triple Translation

2109.11171 2021-09-23 이 페이지의 평가 1건

F1: 49.2

라이브러리

Papers with Code 리더보드 row에 연결된 구현 저장소입니다.

github.com/Mind23-2/MindCode-136 1 논문

github.com/thunlp/ERNIE 1 논문

github.com/AGalassi/StructurePrediction18 1 논문

github.com/allenai/kb 1 논문

github.com/amazon-research/tanl 1 논문

github.com/amazon-science/tanl 1 논문

github.com/amore-upf/masked-coreference 1 논문

github.com/cgraywang/deepex 1 논문

하위 태스크

FR Few-Shot Relation Classification 4 데이터셋 · 4 rows CR Cause-Effect Relation Classification 0 데이터셋 · 0 rows ID Implicit Discourse Relation Classification 0 데이터셋 · 0 rows