벤치마크 상세

LiveCodeBench

최근 알고리즘 문제 풀이: 알고리즘 문제 풀이, 코드 생성, 디버깅형 coding reasoning

공식 리더보드 보기 공식 기본 날짜 창과 동일하게 문항별 pass@1을 평균했습니다. 모델 출시가 평가 창 시작 이후이면 오염 가능성을 표시합니다. 결과가 없는 모델을 0점으로 만들지 않습니다.

모든 공개 결과

모델 검색 · 점수순

확인 2026. 09. 07.Code generation · 2024-08-01–2025-05-01% pass@1

모델·회사 검색28개 결과원문 ↗

순서	모델 / 실행 구성	점수	평가 조건·근거
1	O4-Mini (High)	80.18	454개 시행/문항
2	O3 (High)	75.77	454개 시행/문항
3	O4-Mini (Medium)	74.23	454개 시행/문항
4	Gemini-2.5-Pro-06-05	73.57	454개 시행/문항
5	DeepSeek-R1-0528	73.06	454개 시행/문항
6	Gemini-2.5-Pro-05-06	71.81	454개 시행/문항
7	EXAONE-4.0-32B	70.04	454개 시행/문항
8	OpenReasoning-Nemotron-32B	69.8	454개 시행/문항
9	O3-Mini-2025-01-31 (High)	67.4	454개 시행/문항
10	OpenCodeReasoning-Nemotron-1.1-32B	66.83	454개 시행/문항
11	Grok-3-Mini (High)	66.74	454개 시행/문항
12	O4-Mini (Low)	65.86	454개 시행/문항
13	Qwen3-235B-A22B	65.86	454개 시행/문항
14	XBai-o4-medium	64.98	454개 시행/문항
15	O3-Mini-2025-01-31 (Med)	63	454개 시행/문항
16	Gemini-2.5-Flash-05-20	61.89	454개 시행/문항
17	Gemini-2.5-Flash-04-17	60.57	454개 시행/문항
18	O3-Mini-2025-01-31 (Low)	57.05	454개 시행/문항
19	Claude-Opus-4 (Thinking)	56.61	454개 시행/문항
20	Claude-Sonnet-4 (Thinking)	55.95	454개 시행/문항
21	Claude-Sonnet-4	47.14	454개 시행/문항
22	Claude-Opus-4	46.92	454개 시행/문항
23	Claude-3.5-Sonnet-20241022	36.39	454개 시행/문항
24	GPT-4O-2024-08-06	29.54	454개 시행/문항
25	GPT-4-Turbo-2024-04-09	28.7	454개 시행/문항
26	GPT-4O-mini-2024-07-18	27.47	454개 시행/문항
27	DeepSeek-V3	27.2	454개 시행/문항
28	Claude-3-Haiku	20.22	454개 시행/문항

공개된 숫자만 높은 순으로 표시합니다. 순서가 신뢰구간을 고려한 확정 순위는 아닙니다. 공식 기본 날짜 창과 동일하게 문항별 pass@1을 평균했습니다. 모델 출시가 평가 창 시작 이후이면 오염 가능성을 표시합니다. 결과가 없는 모델을 0점으로 만들지 않습니다.

새 코딩 문제를 계속 추가해 benchmark 오염을 줄입니다.

실제 앱 개발보다는 문제풀이형 코딩에 강한 모델을 보는 지표입니다.