Papers with Code · CC BY-SA 4.0

TruthfulQA

아카이브 평가 33건 · 마지막 적재/변경 2026-10-30

평가 기록

과거 수집 기록이며 최신 순위가 아닙니다. 데이터셋 버전·split·실험 조건과 지표 방향이 검증되지 않은 결과는 직접 비교할 수 없습니다. 날짜는 논문 날짜이며 최신 평가일을 뜻하지 않습니다.

표가 화면보다 넓으면 좌우로 스크롤하여 논문과 구현 링크를 확인하세요.

원본 기록 순서 · 순위 미부여
모델	원본 지표·값	논문	구현
GPT-4 (RLHF)	MC1 0.59	GPT-4 Technical Report 2023-03-15	코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11
Mistral-7B-Instruct-v0.2 + TruthX	MC1 0.56 MC2 0.75	TruthX: Alleviating Hallucinations by Editing Large Language Models in Truthful Space 2024-02-27	코드 1
LLaMa-2-7B-Chat + TruthX	MC1 0.54 MC2 0.74	TruthX: Alleviating Hallucinations by Editing Large Language Models in Truthful Space 2024-02-27	코드 1
LLaMA-2-Chat-13B + Representation Control (Contrast Vector)	MC1 0.54	Representation Engineering: A Top-Down Approach to AI Transparency 2023-10-02	코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5
LLaMA-2-Chat-7B + Representation Control (Contrast Vector)	MC1 0.48	Representation Engineering: A Top-Down Approach to AI Transparency 2023-10-02	코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5
Vicuna 7B + Inference Time Intervention (ITI)	% true 88.6 % info 83.5 MC1 0.389	연결 없음 논문 날짜 미기재	연결 없음
Alpaca 7B + Inference Time Intervention (ITI)	% true 66.6 % info 97.7 MC1 0.319	연결 없음 논문 날짜 미기재	연결 없음
Gopher 280B (zero-shot, Our Prompt + Choices)	MC1 0.295	Scaling Language Models: Methods, Analysis & Insights from Training Gopher 2021-12-08	코드 1 · 코드 2 · 코드 3
LLaMA 7B + Inference Time Intervention (ITI)	% true 45.1 % info 93.8 MC1 0.288	연결 없음 논문 날짜 미기재	연결 없음
GAL 120B	MC1 0.26	Galactica: A Large Language Model for Science 2022-11-16	코드 1
Gopher 7.1 (zero-shot, QA prompts)	MC1 0.25	Scaling Language Models: Methods, Analysis & Insights from Training Gopher 2021-12-08	코드 1 · 코드 2 · 코드 3
GAL 30B	MC1 0.24	Galactica: A Large Language Model for Science 2022-11-16	코드 1
Gopher 7.1B (zero-shot, Our Prompt + Choices)	MC1 0.23	Scaling Language Models: Methods, Analysis & Insights from Training Gopher 2021-12-08	코드 1 · 코드 2 · 코드 3
Gopher 1.4 (zero-shot, QA prompts)	MC1 0.23	Scaling Language Models: Methods, Analysis & Insights from Training Gopher 2021-12-08	코드 1 · 코드 2 · 코드 3
GPT-2 1.5B	% true 29.50 % info 89.84 % true (GPT-judge) 29.87 BLEURT -0.25 ROUGE -9.41 BLEU -4.91 MC1 0.22 MC2 0.39	TruthfulQA: Measuring How Models Mimic Human Falsehoods 2021-09-08	코드 1 · 코드 2 · 코드 3
Gopher 1.4B (zero-shot, Our Prompt + Choices)	MC1 0.217	Scaling Language Models: Methods, Analysis & Insights from Training Gopher 2021-12-08	코드 1 · 코드 2 · 코드 3
GPT-3 175B	% true 20.44 % info 97.55 % true (GPT-judge) 20.56 BLEURT -0.56 ROUGE -17.75 BLEU -17.38 MC1 0.21 MC2 0.33	TruthfulQA: Measuring How Models Mimic Human Falsehoods 2021-09-08	코드 1 · 코드 2 · 코드 3
OPT 175B	MC1 0.21	Galactica: A Large Language Model for Science 2022-11-16	코드 1
GPT-J 6B	% true 26.68 % info 89.96 % true (GPT-judge) 27.17 BLEURT -0.31 ROUGE -11.35 BLEU -7.58 MC1 0.20 MC2 0.36	TruthfulQA: Measuring How Models Mimic Human Falsehoods 2021-09-08	코드 1 · 코드 2 · 코드 3
UnifiedQA 3B	% true 53.86 % info 64.50 % true (GPT-judge) 53.24 BLEURT 0.08 ROUGE 1.76 BLEU -0.16 MC1 0.19 MC2 0.35	TruthfulQA: Measuring How Models Mimic Human Falsehoods 2021-09-08	코드 1 · 코드 2 · 코드 3
GAL 125M	MC1 0.19	Galactica: A Large Language Model for Science 2022-11-16	코드 1
GAL 1.3B	MC1 0.19	Galactica: A Large Language Model for Science 2022-11-16	코드 1
GAL 6.7B	MC1 0.19	Galactica: A Large Language Model for Science 2022-11-16	코드 1
Gopher 280B (zero-shot, QA prompts)	MC1 0. 27	Scaling Language Models: Methods, Analysis & Insights from Training Gopher 2021-12-08	코드 1 · 코드 2 · 코드 3
LLaMA 65B	% true 57 % info 53	LLaMA: Open and Efficient Foundation Language Models 2023-02-27	코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57
LLaMA 33B	% true 52 % info 48	LLaMA: Open and Efficient Foundation Language Models 2023-02-27	코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57
LLaMA 13B	% true 47 % info 41	LLaMA: Open and Efficient Foundation Language Models 2023-02-27	코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57
LLaMA 7B	% true 33 % info 29	LLaMA: Open and Efficient Foundation Language Models 2023-02-27	코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11 · 코드 12 · 코드 13 · 코드 14 · 코드 15 · 코드 16 · 코드 17 · 코드 18 · 코드 19 · 코드 20 · 코드 21 · 코드 22 · 코드 23 · 코드 24 · 코드 25 · 코드 26 · 코드 27 · 코드 28 · 코드 29 · 코드 30 · 코드 31 · 코드 32 · 코드 33 · 코드 34 · 코드 35 · 코드 36 · 코드 37 · 코드 38 · 코드 39 · 코드 40 · 코드 41 · 코드 42 · 코드 43 · 코드 44 · 코드 45 · 코드 46 · 코드 47 · 코드 48 · 코드 49 · 코드 50 · 코드 51 · 코드 52 · 코드 53 · 코드 54 · 코드 55 · 코드 56 · 코드 57
CoA	EM 67.3	Chain-of-Action: Faithful and Multimodal Question Answering through Large Language Models 2024-03-26	코드 1
ToT	EM 66.6	Tree of Thoughts: Deliberate Problem Solving with Large Language Models 2023-05-17	코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6