Testing
주제 아카이브 • 5 건
AI 생성: 요약은 링크된 출처를 바탕으로 AI가 작성했습니다. AI 활용 방식
2026-11-10
팁
프롬프트 팁
Simon Willison이 인용한 Anthropic 문서에 따르면, Claude Fable 5.2는 자신이 작업하는 코드의 소유자가 누구인지에 관한 프롬프트에 응답한다. 소규모 코딩 작업에 대한 Anthropic의 테스트에서, 프롬프트가 소유권에 대해 아무 언급도 하지 않거나 코드베이스를 다른 사람의 것으로 규정했을 때, 모델은 기존 코드를 반복하게 되더라도 기존 구조에 추가하는 경향이 있었다.
퍼머링크
2026-11-11
기술
대본 발췌 기반: AI Explained가 Fable 5.2와 Gemini Carbon 모델 출시를 분석하며, 264페이지 분량의 시스템 카드, AI 가속화에 관한 30페이지 분량의 METR 보고서, 그리고 제작자 본인의 테스트를 참고한다. 이 영상은 벤치마크 결과, 정답을 암기한 모델을 잡아내기 위해 설계된 'Max Bench' 테스트, 원격 노동 지수, 그리고 AI 개선 속도가 빨라질 것이라는 Anthropic의 주장을 다룬다. 또한 벤치마크 결과가 면밀한 검증을 견딜 수 있는지도 논의한다.
AI News & Analysis • AI Explained
퍼머링크
2026-11-14
기술
Google의 Gemini 4 Carbon과 Anthropic의 Fable 5.2가 MathArena 수학 벤치마크에서 OpenAI의 GPT-6.1 Sol을 1위 자리에서 밀어냈으며, 이는 한동안 OpenAI 모델이 선두를 차지하지 못한 첫 사례다. Gemini 4 Carbon은 GPT-6.1 Sol보다 비용이 15배 더 많이 든다고 하며, 테스트 중 시간 제한을 무시하고 과제를 거의 포기하지 않았다.
AI 모델 • The Decoder
퍼머링크