← Natural Language Inference
Papers with Code · CC BY-SA 4.0

RCB

아카이브 평가 22건 · 마지막 적재/변경

평가 기록

과거 수집 기록이며 최신 순위가 아닙니다. 데이터셋 버전·split·실험 조건과 지표 방향이 검증되지 않은 결과는 직접 비교할 수 없습니다. 날짜는 논문 날짜이며 최신 평가일을 뜻하지 않습니다.

표가 화면보다 넓으면 좌우로 스크롤하여 논문과 구현 링크를 확인하세요.

원본 기록 순서 · 순위 미부여
모델원본 지표·값논문구현
Human Benchmark
Average F1
0.68
Accuracy
0.702
RussianSuperGLUE: A Russian Language Understanding Evaluation Benchmark
2020-10-29
코드 1 · 코드 2
RuBERT conversational
Average F1
0.452
Accuracy
0.484
연결 없음
논문 날짜 미기재
연결 없음
RuGPT3Large
Average F1
0.417
Accuracy
0.484
연결 없음
논문 날짜 미기재
연결 없음
YaLM 1.0B few-shot
Average F1
0.408
Accuracy
0.447
연결 없음
논문 날짜 미기재
연결 없음
Golden Transformer
Average F1
0.406
Accuracy
0.546
연결 없음
논문 날짜 미기재
연결 없음
heuristic majority
Average F1
0.4
Accuracy
0.438
Unreasonable Effectiveness of Rule-Based Heuristics in Solving Russian SuperGLUE Tasks
2021-05-03
연결 없음
RuGPT3Medium
Average F1
0.372
Accuracy
0.461
연결 없음
논문 날짜 미기재
연결 없음
SBERT_Large
Average F1
0.371
Accuracy
0.452
연결 없음
논문 날짜 미기재
연결 없음
RuBERT plain
Average F1
0.367
Accuracy
0.463
연결 없음
논문 날짜 미기재
연결 없음
Multilingual Bert
Average F1
0.367
Accuracy
0.445
연결 없음
논문 날짜 미기재
연결 없음
MT5 Large
Average F1
0.366
Accuracy
0.454
mT5: A massively multilingual pre-trained text-to-text transformer
2020-10-22
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8
ruRoberta-large finetune
Average F1
0.357
Accuracy
0.518
연결 없음
논문 날짜 미기재
연결 없음
ruBert-large finetune
Average F1
0.356
Accuracy
0.5
연결 없음
논문 날짜 미기재
연결 없음
RuGPT3Small
Average F1
0.356
Accuracy
0.473
연결 없음
논문 날짜 미기재
연결 없음
SBERT_Large_mt_ru_finetuning
Average F1
0.351
Accuracy
0.486
연결 없음
논문 날짜 미기재
연결 없음
ruBert-base finetune
Average F1
0.333
Accuracy
0.509
연결 없음
논문 날짜 미기재
연결 없음
Random weighted
Average F1
0.319
Accuracy
0.374
Unreasonable Effectiveness of Rule-Based Heuristics in Solving Russian SuperGLUE Tasks
2021-05-03
연결 없음
ruT5-base-finetune
Average F1
0.307
Accuracy
0.468
연결 없음
논문 날짜 미기재
연결 없음
ruT5-large-finetune
Average F1
0.306
Accuracy
0.498
연결 없음
논문 날짜 미기재
연결 없음
RuGPT3XL few-shot
Average F1
0.302
Accuracy
0.418
연결 없음
논문 날짜 미기재
연결 없음
Baseline TF-IDF1.1
Average F1
0.301
Accuracy
0.441
RussianSuperGLUE: A Russian Language Understanding Evaluation Benchmark
2020-10-29
코드 1 · 코드 2
majority_class
Average F1
0.217
Accuracy
0.484
Unreasonable Effectiveness of Rule-Based Heuristics in Solving Russian SuperGLUE Tasks
2021-05-03
연결 없음