Papers with Code · CC BY-SA 4.0

MedQA

아카이브 평가 27건 · 마지막 적재/변경 2026-10-30

평가 기록

과거 수집 기록이며 최신 순위가 아닙니다. 데이터셋 버전·split·실험 조건과 지표 방향이 검증되지 않은 결과는 직접 비교할 수 없습니다. 날짜는 논문 날짜이며 최신 평가일을 뜻하지 않습니다.

표가 화면보다 넓으면 좌우로 스크롤하여 논문과 구현 링크를 확인하세요.

원본 기록 순서 · 순위 미부여
모델	원본 지표·값	논문	구현
Med-Gemini	Accuracy 91.1	Capabilities of Gemini Models in Medicine 2024-04-29	연결 없음
GPT-4	Accuracy 90.2	Can Generalist Foundation Models Outcompete Special-Purpose Tuning? Case Study in Medicine 2023-11-28	코드 1 · 코드 2
Med-PaLM 2	Accuracy 85.4	Towards Expert-Level Medical Question Answering with Large Language Models 2023-05-16	코드 1
Med-PaLM 2 (CoT + SC)	Accuracy 83.7	Towards Expert-Level Medical Question Answering with Large Language Models 2023-05-16	코드 1
Med-PaLM 2 (5-shot)	Accuracy 79.7	Towards Expert-Level Medical Question Answering with Large Language Models 2023-05-16	코드 1
MedMobile (3.8B)	Accuracy 75.7	MedMobile: A mobile-sized language model with expert-level clinical capabilities 2024-10-11	코드 1
Meerkat-7B	Accuracy 74.3	Small Language Models Learn Enhanced Reasoning Skills from Medical Textbooks 2024-03-30	연결 없음
Meerkat-7B (Single)	Accuracy 70.6	Small Language Models Learn Enhanced Reasoning Skills from Medical Textbooks 2024-03-30	연결 없음
Meditron-70B (CoT + SC)	Accuracy 70.2	MEDITRON-70B: Scaling Medical Pretraining for Large Language Models 2023-11-27	코드 1
Flan-PaLM (540 B)	Accuracy 67.6	Large Language Models Encode Clinical Knowledge 2022-12-26	코드 1
LLAMA-2 (70B SC CoT)	Accuracy 61.5	MEDITRON-70B: Scaling Medical Pretraining for Large Language Models 2023-11-27	코드 1
Shakti-LLM (2.5B)	Accuracy 60.3	SHAKTI: A 2.5 Billion Parameter Small Language Model Optimized for Edge AI and Low-Resource Environments 2024-10-15	연결 없음
Codex 5-shot CoT	Accuracy 60.2	Can large language models reason about medical questions? 2022-07-17	코드 1
LLAMA-2 (70B)	Accuracy 59.2	MEDITRON-70B: Scaling Medical Pretraining for Large Language Models 2023-11-27	코드 1
VOD (BioLinkBERT)	Accuracy 55.0	Variational Open-Domain Question Answering 2022-09-23	코드 1 · 코드 2
BioMedGPT-10B	Accuracy 50.4	BioMedGPT: Open Multimodal Generative Pre-trained Transformer for BioMedicine 2023-08-18	코드 1
PubMedGPT (2.7 B)	Accuracy 50.3	Large Language Models Encode Clinical Knowledge 2022-12-26	코드 1
DRAGON + BioLinkBERT	Accuracy 47.5	Deep Bidirectional Language-Knowledge Graph Pretraining 2022-10-17	코드 1 · 코드 2
BioLinkBERT (340 M)	Accuracy 45.1	Large Language Models Encode Clinical Knowledge 2022-12-26	코드 1
GAL 120B (zero-shot)	Accuracy 44.4	Galactica: A Large Language Model for Science 2022-11-16	코드 1
BioLinkBERT (base)	Accuracy 40.0	LinkBERT: Pretraining Language Models with Document Links 2022-03-29	코드 1
GrapeQA: PEGA	Accuracy 39.51	GrapeQA: GRaph Augmentation and Pruning to Enhance Question-Answering 2023-03-22	연결 없음
BioBERT (large)	Accuracy 36.7	BioBERT: a pre-trained biomedical language representation model for biomedical text mining 2019-01-25	코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19
BioBERT (base)	Accuracy 34.1	BioBERT: a pre-trained biomedical language representation model for biomedical text mining 2019-01-25	코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19
GPT-Neo (2.7 B)	Accuracy 33.3	Large Language Models Encode Clinical Knowledge 2022-12-26	코드 1
BLOOM (few-shot, k=5)	Accuracy 23.3	Galactica: A Large Language Model for Science 2022-11-16	코드 1
OPT (few-shot, k=5)	Accuracy 22.8	Galactica: A Large Language Model for Science 2022-11-16	코드 1