← Code Generation
평가 기록
과거 수집 기록이며 최신 순위가 아닙니다. 데이터셋 버전·split·실험 조건과 지표 방향이 검증되지 않은 결과는 직접 비교할 수 없습니다. 날짜는 논문 날짜이며 최신 평가일을 뜻하지 않습니다.
표가 화면보다 넓으면 좌우로 스크롤하여 논문과 구현 링크를 확인하세요.
| 모델 | 원본 지표·값 | 논문 | 구현 |
|---|---|---|---|
| Claude 3 Haiku |
|
PECC: Problem Extraction and Coding Challenges 2024-04-29 |
코드 1 |
| GPT-3.5 Turbo |
|
PECC: Problem Extraction and Coding Challenges 2024-04-29 |
코드 1 |
| codechat-bison |
|
PECC: Problem Extraction and Coding Challenges 2024-04-29 |
코드 1 |
| chat-bison |
|
PECC: Problem Extraction and Coding Challenges 2024-04-29 |
코드 1 |
| Mixtral-8x7B-Instruct |
|
PECC: Problem Extraction and Coding Challenges 2024-04-29 |
코드 1 |
| Phi-3-mini-128k-instruct |
|
PECC: Problem Extraction and Coding Challenges 2024-04-29 |
코드 1 |
| WizardLM-2-7B |
|
PECC: Problem Extraction and Coding Challenges 2024-04-29 |
코드 1 |
| Llama-3-8B-Instruct |
|
PECC: Problem Extraction and Coding Challenges 2024-04-29 |
코드 1 |