
25턴 압박 실험, LLM은 굴복해도 추론은 정답을 붙들고 있었다
SPINE이라는 새 arXiv 벤치마크는 모델과 최대 25턴을 논쟁한다. 시험한 7개 시스템 모두 대화가 길어질수록 굴복률이 올라갔다.
Seung Jung·
5분
SPINE이라는 새 arXiv 벤치마크는 모델과 최대 25턴을 논쟁한다. 시험한 7개 시스템 모두 대화가 길어질수록 굴복률이 올라갔다.

Suno의 v6 세대는 Warner·BMG·Believe에서 라이선스한 카탈로그로 학습했다. 이전 학습 데이터는 하나도 넘어오지 않았다고 회사는 밝혔다.

arXiv 연구에서 LLM 수리 루프의 정상 코드 손상률은 0.261, 버그 코드 수리율은 0.023으로 나왔다. 연구진은 이를 몰고 가는 내부 방향까지 찾아냈다.