← Common Sense Reasoning
Papers with Code · CC BY-SA 4.0

PARus

아카이브 평가 22건 · 마지막 적재/변경

평가 기록

과거 수집 기록이며 최신 순위가 아닙니다. 데이터셋 버전·split·실험 조건과 지표 방향이 검증되지 않은 결과는 직접 비교할 수 없습니다. 날짜는 논문 날짜이며 최신 평가일을 뜻하지 않습니다.

표가 화면보다 넓으면 좌우로 스크롤하여 논문과 구현 링크를 확인하세요.

원본 기록 순서 · 순위 미부여
모델원본 지표·값논문구현
Human Benchmark
Accuracy
0.982
RussianSuperGLUE: A Russian Language Understanding Evaluation Benchmark
2020-10-29
코드 1 · 코드 2
Golden Transformer
Accuracy
0.908
연결 없음
논문 날짜 미기재
연결 없음
YaLM 1.0B few-shot
Accuracy
0.766
연결 없음
논문 날짜 미기재
연결 없음
RuGPT3XL few-shot
Accuracy
0.676
연결 없음
논문 날짜 미기재
연결 없음
ruT5-large-finetune
Accuracy
0.66
연결 없음
논문 날짜 미기재
연결 없음
RuGPT3Medium
Accuracy
0.598
연결 없음
논문 날짜 미기재
연결 없음
RuGPT3Large
Accuracy
0.584
연결 없음
논문 날짜 미기재
연결 없음
RuBERT plain
Accuracy
0.574
연결 없음
논문 날짜 미기재
연결 없음
RuGPT3Small
Accuracy
0.562
연결 없음
논문 날짜 미기재
연결 없음
ruT5-base-finetune
Accuracy
0.554
연결 없음
논문 날짜 미기재
연결 없음
Multilingual Bert
Accuracy
0.528
연결 없음
논문 날짜 미기재
연결 없음
ruRoberta-large finetune
Accuracy
0.508
연결 없음
논문 날짜 미기재
연결 없음
RuBERT conversational
Accuracy
0.508
연결 없음
논문 날짜 미기재
연결 없음
MT5 Large
Accuracy
0.504
mT5: A massively multilingual pre-trained text-to-text transformer
2020-10-22
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8
SBERT_Large_mt_ru_finetuning
Accuracy
0.498
연결 없음
논문 날짜 미기재
연결 없음
SBERT_Large
Accuracy
0.498
연결 없음
논문 날짜 미기재
연결 없음
majority_class
Accuracy
0.498
Unreasonable Effectiveness of Rule-Based Heuristics in Solving Russian SuperGLUE Tasks
2021-05-03
연결 없음
ruBert-large finetune
Accuracy
0.492
연결 없음
논문 날짜 미기재
연결 없음
Baseline TF-IDF1.1
Accuracy
0.486
RussianSuperGLUE: A Russian Language Understanding Evaluation Benchmark
2020-10-29
코드 1 · 코드 2
Random weighted
Accuracy
0.48
Unreasonable Effectiveness of Rule-Based Heuristics in Solving Russian SuperGLUE Tasks
2021-05-03
연결 없음
heuristic majority
Accuracy
0.478
Unreasonable Effectiveness of Rule-Based Heuristics in Solving Russian SuperGLUE Tasks
2021-05-03
연결 없음
ruBert-base finetune
Accuracy
0.476
연결 없음
논문 날짜 미기재
연결 없음