← Conversational Web Navigation
Papers with Code · CC BY-SA 4.0

WebLINX

아카이브 평가 17건 · 마지막 적재/변경

평가 기록

과거 수집 기록이며 최신 순위가 아닙니다. 데이터셋 버전·split·실험 조건과 지표 방향이 검증되지 않은 결과는 직접 비교할 수 없습니다. 날짜는 논문 날짜이며 최신 평가일을 뜻하지 않습니다.

표가 화면보다 넓으면 좌우로 스크롤하여 논문과 구현 링크를 확인하세요.

원본 기록 순서 · 순위 미부여
모델원본 지표·값논문구현
Llama-2-13B
Overall score
25.21
Intent Match
81.91
Element (IoU)
22.82
Text (F1)
26.60
WebLINX: Real-World Website Navigation with Multi-Turn Dialogue
2024-02-08
코드 1 · 코드 2
S-LLaMA-2.7B
Overall score
25.02
Intent Match
84.00
Element (IoU)
22.60
Text (F1)
27.17
WebLINX: Real-World Website Navigation with Multi-Turn Dialogue
2024-02-08
코드 1 · 코드 2
Llama-2-7B
Overall score
24.57
Intent Match
82.64
Element (IoU)
22.26
Text (F1)
26.50
WebLINX: Real-World Website Navigation with Multi-Turn Dialogue
2024-02-08
코드 1 · 코드 2
Flan-T5-3B
Overall score
23.77
Intent Match
81.14
Element (IoU)
20.31
Text (F1)
25.75
WebLINX: Real-World Website Navigation with Multi-Turn Dialogue
2024-02-08
코드 1 · 코드 2
S-LLaMA-1.3B
Overall score
23.73
Intent Match
83.32
Element (IoU)
20.54
Text (F1)
25.85
WebLINX: Real-World Website Navigation with Multi-Turn Dialogue
2024-02-08
코드 1 · 코드 2
GPT-3.5F
Overall score
21.22
Intent Match
77.56
Element (IoU)
18.64
Text (F1)
22.39
WebLINX: Real-World Website Navigation with Multi-Turn Dialogue
2024-02-08
코드 1 · 코드 2
MindAct-3B
Overall score
20.94
Intent Match
79.89
Element (IoU)
16.50
Text (F1)
23.16
WebLINX: Real-World Website Navigation with Multi-Turn Dialogue
2024-02-08
코드 1 · 코드 2
Fuyu-8B
Overall score
19.97
Intent Match
80.07
Element (IoU)
15.70
Text (F1)
22.30
WebLINX: Real-World Website Navigation with Multi-Turn Dialogue
2024-02-08
코드 1 · 코드 2
Flan-T5-780M
Overall score
17.27
Intent Match
80.02
Element (IoU)
15.36
Text (F1)
14.05
WebLINX: Real-World Website Navigation with Multi-Turn Dialogue
2024-02-08
코드 1 · 코드 2
Pix2Act-1.3B
Overall score
16.88
Intent Match
81.80
Element (IoU)
8.28
Text (F1)
25.21
WebLINX: Real-World Website Navigation with Multi-Turn Dialogue
2024-02-08
코드 1 · 코드 2
MindAct-780M
Overall score
15.13
Intent Match
75.87
Element (IoU)
13.39
Text (F1)
13.58
WebLINX: Real-World Website Navigation with Multi-Turn Dialogue
2024-02-08
코드 1 · 코드 2
Flan-T5-250M
Overall score
14.99
Intent Match
79.69
Element (IoU)
14.86
Text (F1)
9.21
WebLINX: Real-World Website Navigation with Multi-Turn Dialogue
2024-02-08
코드 1 · 코드 2
MindAct-250M
Overall score
12.63
Intent Match
74.25
Element (IoU)
12.05
Text (F1)
7.67
WebLINX: Real-World Website Navigation with Multi-Turn Dialogue
2024-02-08
코드 1 · 코드 2
Pix2Act-282M
Overall score
12.51
Intent Match
79.71
Element (IoU)
6.20
Text (F1)
16.40
WebLINX: Real-World Website Navigation with Multi-Turn Dialogue
2024-02-08
코드 1 · 코드 2
GPT-4T (Zero-Shot)
Overall score
10.72
Intent Match
41.66
Element (IoU)
10.85
Text (F1)
6.75
WebLINX: Real-World Website Navigation with Multi-Turn Dialogue
2024-02-08
코드 1 · 코드 2
GPT-4V (Zero-Shot)
Overall score
10.45
Intent Match
42.36
Element (IoU)
10.91
Text (F1)
6.21
WebLINX: Real-World Website Navigation with Multi-Turn Dialogue
2024-02-08
코드 1 · 코드 2
GPT-3.5T (Zero-Shot)
Overall score
8.51
Intent Match
42.77
Element (IoU)
8.62
Text (F1)
3.45
WebLINX: Real-World Website Navigation with Multi-Turn Dialogue
2024-02-08
코드 1 · 코드 2