← Text-To-SQL
Papers with Code · CC BY-SA 4.0

Spider 2.0

아카이브 평가 8건 · 마지막 적재/변경

평가 기록

과거 수집 기록이며 최신 순위가 아닙니다. 데이터셋 버전·split·실험 조건과 지표 방향이 검증되지 않은 결과는 직접 비교할 수 없습니다. 날짜는 논문 날짜이며 최신 평가일을 뜻하지 않습니다.

표가 화면보다 넓으면 좌우로 스크롤하여 논문과 구현 링크를 확인하세요.

원본 기록 순서 · 순위 미부여
모델원본 지표·값논문구현
Spider-Agent + o1-preview
Success Rate
17.03
Spider 2.0: Evaluating Language Models on Real-World Enterprise Text-to-SQL Workflows
2024-11-12
연결 없음
Spider-Agent + GPT-4o
Success Rate
10.13
Spider 2.0: Evaluating Language Models on Real-World Enterprise Text-to-SQL Workflows
2024-11-12
연결 없음
Spider-Agent + Claude-3.5-Sonnect
Success Rate
9.02
Spider 2.0: Evaluating Language Models on Real-World Enterprise Text-to-SQL Workflows
2024-11-12
연결 없음
Spider-Agent + GPT-4
Success Rate
8.86
Spider 2.0: Evaluating Language Models on Real-World Enterprise Text-to-SQL Workflows
2024-11-12
연결 없음
Spider-Agent + Qwen2.5-72B
Success Rate
6.17
Spider 2.0: Evaluating Language Models on Real-World Enterprise Text-to-SQL Workflows
2024-11-12
연결 없음
Spider-Agent + DeepSeek-V2.5
Success Rate
5.22
Spider 2.0: Evaluating Language Models on Real-World Enterprise Text-to-SQL Workflows
2024-11-12
연결 없음
Spider-Agent + Gemini-Pro-1.5
Success Rate
2.53
Spider 2.0: Evaluating Language Models on Real-World Enterprise Text-to-SQL Workflows
2024-11-12
연결 없음
Spider-Agent + Llama-3.1-405B
Success Rate
2.21
Spider 2.0: Evaluating Language Models on Real-World Enterprise Text-to-SQL Workflows
2024-11-12
연결 없음