METR "Anthropic AI 연구 속도 2배 빨라졌다"
독립 평가기관 METR가 2026년 11월 5일 Anthropic의 모델 성능 향상 속도가 2024년 3월~2025년 10월보다 약 2배 빨라졌고 그 주된 원인이 AI라고 밝혔다. 다만 핵심 근거 대부분은 Anthropic이 공개본에서 삭제했다.
독립 AI 평가기관 METR가 2026년 11월 5일 보고서를 내고 Anthropic이 명확히 정의된 과제에서 모델 성능을 끌어올리는 속도가 2024년 3월~2025년 10월보다 약 2배 빨라졌다고 밝혔다. METR는 가속의 주된 원인으로 AI 자체를 꼽았다. 다만 판단에 가장 중요했던 근거 대부분은 Anthropic이 공개본에서 지웠다.

핵심 정리
- METR는 Anthropic 내부 성능 지수의 상승 속도가 2025년 10월 이후 1.9배로 빨라졌다고 추정했다(95% 신뢰구간 1.5~2.8배).
- 2026년 10월 기준 가속분의 "아마도 약 80%"가 AI 덕분이며, 학습 연산량 증가로는 설명되지 않는다고 봤다.
- Anthropic은 핵심 근거 대부분을 비공개 처리했고, 연산 자원의 안전 연구 배분을 검증하는 항목도 중간에 취소했다.
AI가 AI 연구를 얼마나 앞당겼나
METR가 쓴 핵심 지표는 AECI다. 보고서는 이를 Epoch AI의 '능력 지수(ECI)'를 Anthropic식으로 만든 버전이라고 설명한다. METR는 시간에 따른 지수 변화에서 꺾이는 지점 하나를 찾아 그 앞뒤 기울기를 비교했다.
결과는 이전 대비 1.9배였다. METR는 실제 속도가 1.3배나 3배에 가깝더라도 "놀라지 않을 것"이라고 덧붙였다. 이 수치는 Anthropic이 Haiku 5.5 시스템 카드에서 밝힌 1.7배보다 높다. METR는 미공개 신규 모델 자료를 반영한 것이 주된 차이라고 설명했다.
원인은 AI인가, 연산량인가
METR는 학습 연산량의 증가 속도가 빨라져서 생긴 가속은 아니라고 확신한다고 밝혔다. 2025년 말의 변화에는 AI 외 요인이 작용했을 가능성이 크지만, 2026년 10월 현재 가속의 대부분은 AI 때문이라는 판단이다.
직원 인터뷰와 내부 자기 보고도 AI가 속도를 2배로 높였다는 해석과 "부합"했다. 향후 12개월 안에 알고리즘·연산·데이터 쪽 병목도 뚜렷이 보이지 않았지만, 이 판단에는 확신이 없다고 했다.
METR가 본 것과 공개되지 않은 것
평가는 2026년 8월 12일부터 10월 29일까지 11주간 진행됐다. METR는 Anthropic 기기로 내부 벤치마크 점수, 인력·연산 지표, 코드 활동 자료를 살폈고 핵심 직원 약 15명을 인터뷰했다. METR는 Anthropic에서 대가를 받지 않았으며, Anthropic은 무료 토큰만 제공했다.
Anthropic은 비공개 정보를 삭제할 권한을 가졌다. METR는 "Anthropic이 우리가 가장 유익하다고 본 근거의 대부분을 삭제했다"고 적었다. Anthropic은 다른 AI 개발사의 개발을 앞당길 수 있는 기밀을 지우려는 조치라고 설명했다. 연산 배분 검증은 METR가 결론을 내기 전에 취소됐고, Anthropic은 나중에 다시 검토하겠다고 했다.
배경: 외부 평가자 상주 프로그램
Anthropic은 책임 있는 확장 정책(RSP)에서 AI 연구 가속을 핵심 위험 지표로 둔다. 회사는 10월 15일 METR 직원 6명에게 '직원 수준 접근권'을 줬다고 밝혔다. METR는 이번 평가가 그 프로그램과는 별개 프로젝트라고 강조했다.
전망
METR는 과대·과소평가 가능성을 모두 열어 뒀다. 지수가 실제 파급력을 덜 반영할 수도 있고, 가속이 깔끔하게 정의된 과제에 한정될 수도 있다. 앞으로는 Anthropic이 연산 배분 검증을 재개할지, 다음 보고서가 근거를 더 공개할지가 관건이다.
FAQ
'2배'는 모델이 2배 똑똑해졌다는 뜻인가?
아니다. 내부 성능 지수가 오르는 속도가 2024년 3월~2025년 10월보다 약 2배 빠르다는 의미다.
METR는 미공개 모델을 직접 써 봤나?
내부 전용 모델의 벤치마크 자료는 봤지만, 미공개 모델을 직접 실행해 볼 권한은 없었다.
독자가 근거를 검증할 수 있나?
일부만 가능하다. 약 100쪽 분량의 전체 보고서는 Anthropic에 전달됐고, 공개본에서는 핵심 근거 대부분이 빠졌다.
참고 자료
- Independent Assessment of AI R&D Acceleration at Anthropic in October 2026 — METR(2026.11.5)
- An update on independent evaluators — Anthropic(2026.10.15)
- Measurements for understanding the pace of AI development inside frontier labs — Anthropic
댓글 0
현재 댓글 작성이 비활성화되어 있습니다.