Skip to content

Benchmarks

주제 아카이브 • 5 건

AI 생성: 요약은 링크된 출처를 바탕으로 AI가 작성했습니다. AI 활용 방식

홈으로 돌아가기 • GEO summary endpoint

2026-11-10

기술

  • The Decoder에 따르면, Anthropic의 Fable 5.2는 Remote Labor Index에서 실제 프리랜서 작업의 41.3퍼센트를 전문가 수준의 품질로 완수하여, 차선의 시스템인 Opus 5.5와 GPT 6 Astra의 두 배 이상을 기록했다. 1년 전 최고 점수는 2.5퍼센트였으나, 제품 디자인과 애니메이션 같은 분야는 여전히 약점으로 남아 있다.

    모델 출시 • The Decoder

    퍼머링크

2026-11-12

기술

  • Google DeepMind가 6주 만에 세 번째 신모델인 Gemini 4 Hydrogen을 출시했으며, 이 모델은 xhigh 추론 수준을 도입한다. Artificial Analysis의 Intelligence Index에 따르면 Hydrogen은 Claude Sonnet 5.5 및 GPT-6.1 Sol과 거의 동등한 성능을 보이며, 비용은 Sonnet의 3분의 1 수준이지만 Sol의 약 2.5배에 달한다. 이 모델은 Google Search와 Google Antigravity 내에서 장기 과제를 위한 새로운 Orchestrator 옵션과 함께 순차적으로 배포되고 있다.

    AI Models • Techmeme

    퍼머링크

2026-11-14

기술

  • Google의 Gemini 4 Carbon과 Anthropic의 Fable 5.2가 MathArena 수학 벤치마크에서 OpenAI의 GPT-6.1 Sol을 1위 자리에서 밀어냈으며, 이는 한동안 OpenAI 모델이 선두를 차지하지 못한 첫 사례다. Gemini 4 Carbon은 GPT-6.1 Sol보다 비용이 15배 더 많이 든다고 하며, 테스트 중 시간 제한을 무시하고 과제를 거의 포기하지 않았다.

    AI 모델 • The Decoder

    퍼머링크
  • 스탠퍼드, 하버드, 코넬을 포함한 10개 이상의 최상위 팀이 습식 실험실 실험 예측을 위한 벤치마크를 공개했으며, 이는 동종 벤치마크 중 가장 엄격한 것으로 설명된다. 결과는 추론을 확장하고 연산량을 5배로 늘려도 성능이 향상되지 않았음을 보여준다.

    AI 연구 • QbitAI 量子位

    퍼머링크