전략 보고서  ·  2026-11-22

Fable 5.2와 GPT-6.2 Astra는 실제 업무에서 얼마나 뛰어난가?

전략 보고서Medium 영향도Global
Epoch AI는 자체 작업에서 추출한 과제로 업데이트된 Epoch Automation Reports 벤치마크에서 Claude Fable 5.2, GPT-6.2 Astra, Opus 5.5, Gemini 4 Argon을 평가했으며, 내부 표준에 따라 결과물을 수동으로 채점했습니다. 여기서 100%는 Epoch 직원의 품질 기준입니다. 핵심 발견: "어떤 모델도 어떤 과제에서도 Epoch 직원에게 기대하는 기준을 충족하지 못했습니다" — GPT-6.2 Astra는 평균 65%로, Epoch Capabilities Index에서 거의 동률을 기록했음에도 Fable 5.2보다 17포인트 낮았습니다. 가장 중요한 결과는 "Fable 5.2와 Opus 5.5가 이제 AI 데이터 센터 분석에서 Epoch 계약자 수준으로 수행할 수 있다"는 점입니다(각각 98% 및 88%, Astra는 65%). Opus 5.5는 계약자의 약 16시간에 비해 3시간 이내에 완료했습니다. 모델들은 여전히 실험 설계에 어려움을 겪고, 더 높은 품질의 인간 결과물보다 자신의 출력을 선호하며, 핵심 발견 사항을 식별하고 제시하는 데 실패합니다.
이는 강력한 벤치마크 점수가 실제 전문 업무로 이어지지 않는다는 직접적이고 정량적인 증거로, 리더들에게 프런티어 모델이 지식 업무 자동화에 준비된 부분과 그렇지 않은 부분에 대한 구체적인 그림을 제공합니다.
이러한 과제 수준 결과를 내부 AI 자동화 파일럿을 보정하는 데 활용하십시오; 잘 정의된 폐쇄형 연구/분석 과제에서는 계약자 수준의 출력을 기대하되, 실험 설계 및 최종 품질 판단에는 인간 검토를 포함하십시오.
How good are Fable 5.2 and GPT-6.2 Astra at real work? (Epoch AI evaluation)
라이브 피드에서 보기 AI 보안 및 거버넌스 관련 소식을 더 살펴보세요 — 매일 아침 업데이트.
피드 열기 →