arXiv:2607.14049: 『Deep Interaction』—추론 체인 수정이 교정 성공률 +25%, 토큰 40% 절약

추론 체인이란 무엇이며 문제는 무엇인가?

추론 체인—chain-of-thought라고도 함—은 대규모 언어 모델이 최종 답에 이르는 과정에서 생성하는 일련의 중간 추론 단계입니다. 예를 들어 수학 문제를 풀 때 모델은 각 계산 단계를 나열합니다. 어떤 단계에 오류가 있을 때 일반적인 접근 방식은 질문을 반복하거나 새 메시지에 수정을 추가하는 것입니다—그러나 이는 토큰을 소비하고, 맥락을 잃게 하며, 모델이 같은 실수를 반복하지 않는다고 보장하지 않습니다.

Deep Interaction이 상호 작용을 어떻게 바꾸는가?

Hefeng Zhou, Jinxuan Zhang, Jiong Lou 및 공동 저자들이 제안한 Deep Interaction은 추론 체인의 직접 편집을 도입합니다: 사용자가 체인 내 잘못된 단계를 찾아 변경하면 모델은 수정된 경로를 따라 생성을 계속합니다. 이 방법은 개념적으로 git rebase 작업과 유사합니다—히스토리 상단에 수정을 추가하는 대신 분기점을 수정하는 것입니다. STEM 과제에서 새 프롬프트를 사용하는 기준선과 비교하여 이 접근 방식은 교정 성공률 +25%를 달성하며, 동시에 상호 작용당 토큰 사용량을 40% 절약합니다. 비교하면, o3나 Gemini 2.5 Pro 같은 chain-of-thought 모델은 요청당 수천 개의 토큰을 생성합니다; 40% 감소는 비용과 지연 시간에 직접적으로 영향을 미칩니다.

사용자와 개발팀에 대한 실질적 의미

이 방법은 사용자가 새 프롬프트를 작성하는 대신 실시간으로 모델의 사고 과정을 편집하는 인터페이스 개발 가능성을 엽니다. 이는 전문적 응용 분야—의료 진단, 공학 계산, 법률 분석—에서 특히 관련이 있으며, 사용자가 잘못된 중간 단계를 식별할 수 있지만 전체 질문을 다시 표현하고 싶지 않은 경우입니다. Zhou 등은 이 접근 방식이 추가 파인튜닝 없이 기존 모델에서 작동한다고 강조합니다.