← Multi-task Language Understanding
평가 기록
과거 수집 기록이며 최신 순위가 아닙니다. 데이터셋 버전·split·실험 조건과 지표 방향이 검증되지 않은 결과는 직접 비교할 수 없습니다. 날짜는 논문 날짜이며 최신 평가일을 뜻하지 않습니다.
표가 화면보다 넓으면 좌우로 스크롤하여 논문과 구현 링크를 확인하세요.
| 모델 | 원본 지표·값 | 논문 | 구현 |
|---|---|---|---|
| PaLM 2 (few-shot, k=8, SC) |
|
PaLM 2 Technical Report 2023-05-17 |
코드 1 |
| PaLM 2 (8-shot, CoT) |
|
PaLM 2 Technical Report 2023-05-17 |
코드 1 |
| Flan-PaLM 540B (8-shot, fine-tuned, CoT + SC) |
|
Scaling Instruction-Finetuned Language Models 2022-10-20 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 |
| Flan-U-PaLM 540B (CoT) |
|
Scaling Instruction-Finetuned Language Models 2022-10-20 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 |
| Flan-PaLM 540B (8-shot, fine-tuned, CoT) |
|
Scaling Instruction-Finetuned Language Models 2022-10-20 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 |
| PaLM 540B |
|
PaLM: Scaling Language Modeling with Pathways 2022-04-05 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 |
| U-PaLM 540B (CoT) |
|
Transcending Scaling Laws with 0.1% Extra Compute 2022-10-20 |
연결 없음 |
| text-davinci-003 |
|
Scaling Instruction-Finetuned Language Models 2022-10-20 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 |
| code-davinci-002 |
|
Scaling Instruction-Finetuned Language Models 2022-10-20 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 |
| text-davinci-002 |
|
Scaling Instruction-Finetuned Language Models 2022-10-20 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 |
| Flan-PaLM 540B (8-shot, fine-tuned) |
|
Scaling Instruction-Finetuned Language Models 2022-10-20 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 |
| GPT-3 Davinci 175B |
|
Scaling Instruction-Finetuned Language Models 2022-10-20 |
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 |