콘텐츠로 건너뛰기
  • 모델
  • 순위
  • Ori
ElevenLabs launch offer: every ElevenLabs model is 50% off through October 19, 2026. See ElevenLabs models

Footer

OpenRouterOpenRouter
© 2026 OpenRouter, Inc

제품

  • 채팅
  • 순위
  • 벤치마크
  • 앱
  • 찾아보기
  • 모델
  • Ori
  • 컬렉션
  • 제공업체
  • 도구
  • 가격
  • Business
  • Enterprise
  • 랩

회사

  • 정보
  • 블로그
  • 채용
    채용
  • 개인정보 보호
  • 서비스 약관
  • 신뢰 센터
  • 지원
  • OR과 호환
  • 데이터
  • 브랜드

개발자

  • 문서
  • API 참조
  • 개발자 플랫폼
  • 상태
  • AI 사이트맵

연결

  • Discord
  • GitHub
  • LinkedIn
  • X
  • YouTube

벤치마크

OpenRouter 요청에서 실제로 설정할 수 있는 항목인 모델, 제공업체, 검색 엔진 및 도구 예산을 독립적이고 재현 가능하게 측정합니다. 모든 점수에서 해당 점수를 뒷받침하는 구성, 비용 및 텔레메트리를 확인할 수 있습니다.

13 벤치마크1,975,061 작업 평가최근 실행 2026년 10월 12일

Benchmarks API

API를 통해 벤치마크 결과 및 메타데이터 가져오기

에이전트 및 도구

벤치마크품질값속도
  • τ²-Bench Airline

    엄격한 정책 제약하에서 도구를 호출하는 멀티턴 서비스 에이전트입니다.

    145 모델최근 실행 2026년 10월 12일

    80.0%
    anthropic의 파비콘
    Claude Fable 5
    US$0.006
    z-ai의 파비콘
    GLM 5.3 Flash
    42s
    z-ai의 파비콘
    GLM 5.3
    품질80.0%
    anthropic의 파비콘
    Claude Fable 5
    값US$0.006
    z-ai의 파비콘
    GLM 5.3 Flash
    속도42s
    z-ai의 파비콘
    GLM 5.3

미디어

요청에 따라 평가되고 출력물 단위로 가격이 책정되는 이미지, 클립 및 음성 생성.

벤치마크샘플값속도
  • Image

    실패하도록 설계된 이미지 프롬프트: 깊이, 방향, 개수 세기, 프레임 내 텍스트.

    52 모델

    Full wine glass에 대한 Black Forest Labs: FLUX.2 Flex 출력Closed umbrellas에 대한 Black Forest Labs: FLUX.2 Klein 4B 출력Three fingers에 대한 Black Forest Labs: FLUX.2 Max 출력
    US$0.007
    recraft의 파비콘
    Recraft: Recraft V4.1 Flash
    2s
    recraft의 파비콘
    Recraft: Recraft V4.1 Flash
    Full wine glass에 대한 Black Forest Labs: FLUX.2 Flex 출력Closed umbrellas에 대한 Black Forest Labs: FLUX.2 Klein 4B 출력Three fingers에 대한 Black Forest Labs: FLUX.2 Max 출력
    값US$0.007
    recraft의 파비콘
    Recraft: Recraft V4.1 Flash
    속도2s
    recraft의 파비콘
    Recraft: Recraft V4.1 Flash
  • Video

    모든 모델에서 동일한 길이와 해상도로 고정된 6초 분량의 동영상입니다.

    26 모델

    Traffic light에 대한 Alibaba: HappyHorse 1.0 출력Five candles에 대한 Alibaba: HappyHorse 1.1 출력Wrong-way escalator에 대한 Alibaba: Wan 2.6 출력
    US$0.24
    x-ai의 파비콘
    SpaceXAI: Grok Imagine Video 1.5 Lite
    45s
    google의 파비콘
    Google: Gemini Omni 1.1 Flash
    Traffic light에 대한 Alibaba: HappyHorse 1.0 출력Five candles에 대한 Alibaba: HappyHorse 1.1 출력Wrong-way escalator에 대한 Alibaba: Wan 2.6 출력
    값US$0.24
    x-ai의 파비콘
    SpaceXAI: Grok Imagine Video 1.5 Lite
    속도45s
    google의 파비콘
    Google: Gemini Omni 1.1 Flash
  • Speech

    모든 음성으로 같은 한 문장: 단어가 그대로 재현되었으며 지시가 반영되었습니까?

    31 모델

    US$0.000
    mistralai의 파비콘
    Mistral: Voxtral Mini TTS
    1s
    elevenlabs의 파비콘
    ElevenLabs: Eleven Flash v2.5
    값US$0.000
    mistralai의 파비콘
    Mistral: Voxtral Mini TTS
    속도1s
    elevenlabs의 파비콘
    ElevenLabs: Eleven Flash v2.5
  • Memes

    밈을 이미지로 편집하거나 클립으로 애니메이션화하고, 요구사항이 제대로 반영되었는지 평가합니다.

    59 모델

    I am once again asking에 대한 Black Forest Labs: FLUX.2 Flex 출력Disaster girl에 대한 Black Forest Labs: FLUX.2 Klein 4B 출력Laughing Leo에 대한 Black Forest Labs: FLUX.2 Max 출력
    US$0.010
    meta의 파비콘
    Meta: Muse Image
    7s
    black-forest-labs의 파비콘
    Black Forest Labs: FLUX.2 Klein 4B
    I am once again asking에 대한 Black Forest Labs: FLUX.2 Flex 출력Disaster girl에 대한 Black Forest Labs: FLUX.2 Klein 4B 출력Laughing Leo에 대한 Black Forest Labs: FLUX.2 Max 출력
    값US$0.010
    meta의 파비콘
    Meta: Muse Image
    속도7s
    black-forest-labs의 파비콘
    Black Forest Labs: FLUX.2 Klein 4B

아티팩트 생성

텍스트 모델은 그림을 만들고 플레이 가능한 게임을 제작하는 등 일반적이지 않은 작업을 수행합니다.

벤치마크샘플값속도
  • Sketch

    텍스트 모델은 프롬프트를 바탕으로 그림을 만듭니다. 결과물은 이미지로 평가됩니다.

    204 모델

    Pelican on a bike에 대한 Amazon: Nova Lite 1.0 출력Penguin with an umbrella에 대한 Amazon: Nova 2 Lite 출력Pelican riding a bicycle에 대한 Amazon: Nova Premier 1.0 출력
    US$0.000032
    mistralai의 파비콘
    Mistral: Mistral Nemo
    2s
    tencent의 파비콘
    Tencent: Hy-MT2-1.8B
    Pelican on a bike에 대한 Amazon: Nova Lite 1.0 출력Penguin with an umbrella에 대한 Amazon: Nova 2 Lite 출력Pelican riding a bicycle에 대한 Amazon: Nova Premier 1.0 출력
    값US$0.000032
    mistralai의 파비콘
    Mistral: Mistral Nemo
    속도2s
    tencent의 파비콘
    Tencent: Hy-MT2-1.8B
  • Games

    텍스트 모델은 한 번의 시도에서 단일 브리프로 플레이 가능한 게임을 만듭니다.

    29 모델

    Fruit ninja에 대한 Anthropic: Claude Opus 5 출력Marble ball maze에 대한 DeepSeek: DeepSeek V4.1 Flash 출력First-person shooter에 대한 DeepSeek: DeepSeek V4 Flash 0423 출력
    US$0.003
    openai의 파비콘
    OpenAI: gpt-oss-120b
    41s
    google의 파비콘
    Google: Gemini 3.5 Flash Lite
    Fruit ninja에 대한 Anthropic: Claude Opus 5 출력Marble ball maze에 대한 DeepSeek: DeepSeek V4.1 Flash 출력First-person shooter에 대한 DeepSeek: DeepSeek V4 Flash 0423 출력
    값US$0.003
    openai의 파비콘
    OpenAI: gpt-oss-120b
    속도41s
    google의 파비콘
    Google: Gemini 3.5 Flash Lite

추론

벤치마크품질값속도
  • GPQA Diamond

    검색만으로는 풀기 어렵고 신중한 추론이 필요한 대학원 수준의 과학 문제입니다.

    160 모델최근 실행 2026년 10월 12일

    95.6%
    google의 파비콘
    Gemini 3.8 Flash
    US$0.005
    z-ai의 파비콘
    GLM 5.3 Flash
    21s
    anthropic의 파비콘
    Claude Sonnet 5.5
    품질95.6%
    google의 파비콘
    Gemini 3.8 Flash
    값US$0.005
    z-ai의 파비콘
    GLM 5.3 Flash
    속도21s
    anthropic의 파비콘
    Claude Sonnet 5.5
  • VGI-Bench

    긴 동영상에 관한 객관식 질문: 무엇이 보여졌거나 말해졌는지, 또는 어떤 일이 일어나지 않았는지.

    53 모델최근 실행 2026년 10월 12일

    66.2%
    bytedance-seed의 파비콘
    Seed 1.6
    US$0.039
    bytedance-seed의 파비콘
    Seed 1.6
    64s
    bytedance-seed의 파비콘
    Seed 1.6
    품질66.2%
    bytedance-seed의 파비콘
    Seed 1.6
    값US$0.039
    bytedance-seed의 파비콘
    Seed 1.6
    속도64s
    bytedance-seed의 파비콘
    Seed 1.6

검색

벤치마크품질값속도
  • BrowseComp

    실시간 웹에서 찾기 어려운 사실을 대상으로, 지속적인 다단계 조사를 평가합니다.

    4 모델최근 실행 2026년 8월 18일

    89.0%
    Perplexity의 파비콘
    Perplexity
    anthropic의 파비콘
    Claude Opus 5 · high
    US$0.99
    Perplexity의 파비콘
    Perplexity
    anthropic의 파비콘
    Claude Opus 5 · high
    1.9m
    Perplexity의 파비콘
    Perplexity
    anthropic의 파비콘
    Claude Opus 5 · high
    품질89.0%
    Perplexity의 파비콘
    Perplexity
    anthropic의 파비콘
    Claude Opus 5 · high
    값US$0.99
    Perplexity의 파비콘
    Perplexity
    anthropic의 파비콘
    Claude Opus 5 · high
    속도1.9m
    Perplexity의 파비콘
    Perplexity
    anthropic의 파비콘
    Claude Opus 5 · high
  • DeepSearchQA

    정답이 목록인 질문으로, 불필요한 항목 없이 철저히 검색했는지를 평가합니다.

    4 모델최근 실행 2026년 8월 18일

    77.0%
    Parallel의 파비콘
    Parallel
    anthropic의 파비콘
    Claude Opus 5 · high
    US$0.10
    Perplexity의 파비콘
    Perplexity
    openai의 파비콘
    GPT-5.6 Luna · xhigh
    1.6m
    Perplexity의 파비콘
    Perplexity
    openai의 파비콘
    GPT-5.6 Luna · xhigh
    품질77.0%
    Parallel의 파비콘
    Parallel
    anthropic의 파비콘
    Claude Opus 5 · high
    값US$0.10
    Perplexity의 파비콘
    Perplexity
    openai의 파비콘
    GPT-5.6 Luna · xhigh
    속도1.6m
    Perplexity의 파비콘
    Perplexity
    openai의 파비콘
    GPT-5.6 Luna · xhigh
  • HLE

    검색 벤치마크로서의 Humanity's Last Exam: 실시간 검색으로 전문가 수준의 질문에 답합니다.

    3 모델최근 실행 2026년 9월 15일

    77.4%
    Perplexity의 파비콘
    Perplexity
    anthropic의 파비콘
    Claude Opus 5 · high
    US$0.16
    Perplexity의 파비콘
    Perplexity
    anthropic의 파비콘
    Claude Opus 5 · high
    48s
    Perplexity의 파비콘
    Perplexity
    anthropic의 파비콘
    Claude Opus 5 · high
    품질77.4%
    Perplexity의 파비콘
    Perplexity
    anthropic의 파비콘
    Claude Opus 5 · high
    값US$0.16
    Perplexity의 파비콘
    Perplexity
    anthropic의 파비콘
    Claude Opus 5 · high
    속도48s
    Perplexity의 파비콘
    Perplexity
    anthropic의 파비콘
    Claude Opus 5 · high
  • WideSearch

    전체 표를 채우는 과제입니다. 항목별 답변 정확도는 부분 일치에도 점수를 부여합니다.

    4 모델최근 실행 2026년 8월 18일

    84.0%
    Perplexity의 파비콘
    Perplexity
    openai의 파비콘
    GPT-5.6 Sol · high
    US$0.063
    Perplexity의 파비콘
    Perplexity
    openai의 파비콘
    GPT-5.6 Luna · xhigh
    1.9m
    Perplexity의 파비콘
    Perplexity
    openai의 파비콘
    GPT-5.6 Sol · high
    품질84.0%
    Perplexity의 파비콘
    Perplexity
    openai의 파비콘
    GPT-5.6 Sol · high
    값US$0.063
    Perplexity의 파비콘
    Perplexity
    openai의 파비콘
    GPT-5.6 Luna · xhigh
    속도1.9m
    Perplexity의 파비콘
    Perplexity
    openai의 파비콘
    GPT-5.6 Sol · high

동일한 모델의 사용량 기반 보기는 모델 순위 및 전체 모델 목록에서 확인하세요.