OrcaRouter AI 모델 리더보드의 통합 랭킹. 2026년 9월 16일 업데이트 기준 1위 OpenAI GPT-5.4 Pro 82.0, 2위 GPT-5.6 Luna 77.8, 3위 DeepSeek V4.1 Flash 74.3
컨티뉴엄 AI(CONTINUUM AI)가 자사의 OpenAI 호환 LLM 게이트웨이인 'OrcaRouter'를 기반으로 한 통합 리더보드를 가동하며 주요 AI 모델의 종합 순위를 발표했다. 2026년 9월 17일 기준 종합 랭킹에서는 OpenAI의 'GPT-5.4 Pro'가 82.0점으로 정상에 올랐다.
이번에 공개된 통합 리더보드는 서로 다른 출처의 네 가지 평가 지표를 고정된 가중치로 합산해 산출한다. 벤더가 자체 제출한 점수나 유료 배치는 배제되며, 인간 선호도(40%), 독립 벤치마크(30%), OrcaRouter 자체 운영 증거(20%), 생태계 채택률(10%)이 반영된다.
인간 선호도는 LMArena의 커뮤니티 Elo 투표 결과를 활용하며, 독립 벤치마크는 Artificial Analysis의 지능 지수를 비롯해 코딩, 수학, GPQA Diamond, τ²-Bench, SWE-bench Verified 등의 결과를 결합한다. 운영 증거의 경우 OrcaRouter 이용자가 수행하는 블라인드 대결 승률과 게이트웨이 텔레메트리 데이터가 적용되며, 채택률 지표는 OpenRouter의 토큰 점유율을 바탕으로 한다.
특히 전체 점수의 20%를 차지하는 블라인드 대결은 이용자가 동일 프롬프트에 대한 두 익명 모델의 답변을 비교·투표한 뒤 결과를 확인하는 방식으로 운영된다.
지능 지수 외에도 비용과 성능 간의 가성비를 한눈에 파악할 수 있도록 100만 토큰당 혼합 가격, 응답 지연, 신뢰도, 모멘텀 등의 지표가 함께 제공된다. 9월 17일 기준 1위인 GPT-5.4 Pro의 혼합 가격은 100만 토큰당 165달러(입력 60달러, 출력 270달러)에 달한 반면, 3위인 DeepSeek V4.1 Flash는 0.38달러(입력 0.15달러, 출력 0.6달러)에 불과해 상위권 내에서도 가격 차이가 크게 벌어지는 양상을 보였다.
2026년 9월 17일 기준 상위 10개 모델 순위
1. OpenAI GPT-5.4 Pro (82.0점)
2. OpenAI GPT-5.6 Luna (77.8점)
3. DeepSeek V4.1 Flash (74.3점)
4. OpenAI GPT-6 Astra (73.7점)
5. Anthropic Claude Opus 5 (73.2점)
6. Anthropic Claude Fable 5.1 (73.0점)
7. OpenAI GPT-5.6 Sol (72.1점)
8. Z.ai GLM 5.3 (71.5점)
9. Z.ai GLM 5.3 Flash (70.4점)
10. Google Gemini 3.8 Flash (68.8점)
총 25개 모델을 다루는 이번 리더보드는 텍스트, 코딩, 비전, 수학, 추론, 에이전트 등 6개 분야별로 세부 순위를 확인할 수 있다.
한편, 게이트웨이를 통해 라우팅된 토큰의 연구소별 점유율도 함께 집계됐다. 동일 기준 점유율은 DeepSeek이 63.0%로 가장 높았으며, OpenAI(11.5%), Z.ai(11.0%), Obsidian(4.9%)이 뒤를 이었다. 다만 점유율 수치는 참고용으로만 활용되며 순위 산정에는 영향을 주지 않는다.
리더보드 데이터는 JSON, CSV 다운로드 및 API 질의를 지원하며, RSS 구독과 사이트 부착용 순위 배지 기능도 함께 제공된다.
