← Multiple Choice Question Answering (MCQA)

Papers with Code · CC BY-SA 4.0

MMLU (Professional medicine)

아카이브 평가 6건 · 마지막 적재/변경 2026-10-30

원본 데이터셋 링크 1

평가 기록

과거 수집 기록이며 최신 순위가 아닙니다. 데이터셋 버전·split·실험 조건과 지표 방향이 검증되지 않은 결과는 직접 비교할 수 없습니다. 날짜는 논문 날짜이며 최신 평가일을 뜻하지 않습니다.

표가 화면보다 넓으면 좌우로 스크롤하여 논문과 구현 링크를 확인하세요.

원본 기록 순서 · 순위 미부여
모델	원본 지표·값	논문	구현
Med-PaLM 2 (5-shot)	Accuracy 95.2	Towards Expert-Level Medical Question Answering with Large Language Models 2023-05-16	코드 1
Med-PaLM 2 (CoT + SC)	Accuracy 93.4	Towards Expert-Level Medical Question Answering with Large Language Models 2023-05-16	코드 1
Med-PaLM 2 (ER)	Accuracy 92.3	Towards Expert-Level Medical Question Answering with Large Language Models 2023-05-16	코드 1
BioMedGPT-LM-7B	Accuracy 51.1	BioMedGPT: Open Multimodal Generative Pre-trained Transformer for BioMedicine 2023-08-18	코드 1
Llama2-7B	Accuracy 43.38	Llama 2: Open Foundation and Fine-Tuned Chat Models 2023-07-18	코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19
Llama2-7B-chat	Accuracy 40.07	Llama 2: Open Foundation and Fine-Tuned Chat Models 2023-07-18	코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19