클로드 오퍼스 4.5, 기록 압축 시험에서 코딩 성능 입증

요약

엔비디아 연구진은 대화 기록을 압축하여 새로운 문맥으로 전달하는 방식을 시험했습니다. 이 시험에는 클로드 오퍼스 4.5와 GPT 5.6 Sol 같은 최신 모델들이 사용되었습니다. 연구진은 전체 대화 기록을 계속 이어 붙이는 방식과, 기록이 일정 길이 도달 시 작업 상태를 요약해 새 대화로 옮기는 방식을 비교 분석했습니다. 코드 수정 과제인 SWE-bench Verified에서 클로드 오퍼스 4.5는 단일 행동 압축 설정 시 70.2%의 해결률을 기록했습니다. 이는 전체 기록 유지 방식의 70.0%와 유사한 수준입니다. 반면, GPT 5.6 Sol은 단일 행동 압축 설정에서 SWE-bench Verified 82.4%, Terminal-Bench 2.1에서 84.3%를 기록했으나, 이는 전체 기록 유지 기준치보다 낮은 수치였습니다. 이 연구는 문맥(context)을 압축하는 것이 정보 손실을 유발할 수 있음을 지적하며, 필요한 정보는 원문이나 저장된 기록에서 찾아 읽어야 한다고 강조했습니다. 또한, 서버 실험을 통해 문맥 크기가 커질수록 출력 토큰당 비용이 높아지는 경향을 보여, 효율적인 정보 관리가 중요함을 시사했습니다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다. 투자 판단의 근거로 삼기 전에 원문을 확인하세요.