벤치마크 상세
VibeEval
어려운 이미지 질의응답: 복잡한 이미지에 대한 질문에 근거를 찾아 답하는 능력
공식 리더보드 보기
Reka 원본 README의 all 열입니다. 글쓰기 선호도 평가가 아니라 멀티모달 이미지 이해 평가입니다. 최신 출시 모델이 없는 원본 공개 표를 역사적 참고 결과로 제공합니다.
모든 공개 결과
모델 검색 · 점수순확인 2026. 09. 07.Vibe-Eval v1 · all split · archived public table% Vibe-Eval score
12개 결과원문 ↗
| 순서 | 모델 / 실행 구성 | 점수 | 평가 조건·근거 |
|---|---|---|---|
| 1 | Gemini Flash 2.0 | 67.1 | Vibe-Eval v1 · all split · archived public table |
| 2 | Claude 3.5 Sonnet | 66 | Vibe-Eval v1 · all split · archived public table |
| 3 | GPT-4o | 64.7 | Vibe-Eval v1 · all split · archived public table |
| 4 | Gemini-1.5 Pro | 63.8 | Vibe-Eval v1 · all split · archived public table |
| 5 | GPT-4o-mini | 56.7 | Vibe-Eval v1 · all split · archived public table |
| 6 | Reka Flash | 56 | Vibe-Eval v1 · all split · archived public table |
| 7 | Pixtral Large | 55.1 | Vibe-Eval v1 · all split · archived public table |
| 8 | Grok Vision Beta | 54.2 | Vibe-Eval v1 · all split · archived public table |
| 9 | Gemini 1.5 Flash 8b | 54.1 | Vibe-Eval v1 · all split · archived public table |
| 10 | Claude Opus | 52.8 | Vibe-Eval v1 · all split · archived public table |
| 11 | Pixtral 12b | 52.5 | Vibe-Eval v1 · all split · archived public table |
| 12 | Claude Haiku | 48.5 | Vibe-Eval v1 · all split · archived public table |
일치하는 모델이 없습니다. 검색어를 줄여 보세요.
공개된 숫자만 높은 순으로 표시합니다. 순서가 신뢰구간을 고려한 확정 순위는 아닙니다. Reka 원본 README의 all 열입니다. 글쓰기 선호도 평가가 아니라 멀티모달 이미지 이해 평가입니다. 최신 출시 모델이 없는 원본 공개 표를 역사적 참고 결과로 제공합니다.
읽는 법
전체 벤치마크Reka의 어려운 이미지 질의응답 데이터셋입니다.
all·hard·normal 구분을 확인합니다. 이 표는 원저자가 공개한 all 결과입니다.