arXiv:2607.13562: AI 조언은 『모르겠다』는 의향을 억누른다—답이 틀려도

AI 조언은 『모르겠다』는 응답을 거의 제거한다

이탈리아 대학 소속의 세 저자—Chiara Marcoccia, Walter Quattrociocchi, Valerio Caprao—의 새 연구에 따르면 AI 제안이 사람들이 자신의 불확실성을 평가하는 방식을 극적으로 변화시킵니다. 총 3,132명의 참가자를 대상으로 한 다섯 가지 실험(4회의 사전 등록 실험과 1회의 복제 연구)에서 참가자들은 의도적으로 틀린 AI 제안을 보면서 질문에 답했으며, 정확한 답에는 금전적 보상이 주어졌습니다. 결과는 우려스럽습니다: 『모르겠다』고 말하려는 의향이 거의 사라졌고, 정확도는 3분의 1로 떨어졌으며, 자신감은 거의 두 배가 되었습니다.

과잉 의존이란 무엇이며 왜 위험한가?

과잉 의존—AI에 대한 과도한 의존—은 AI 답변의 정확성을 스스로 평가하지 않고 무비판적으로 수용하는 것을 의미합니다. 연구는 이를 명확하게 수치화합니다: AI 도움 없이는 참가자들이 예를 들어 60%의 경우에 맞았고 확신이 없을 때는 『모르겠다』를 선택했는데, AI 제안(틀렸더라도)이 있을 때는 훨씬 더 자주 답을 했고 틀렸습니다. 구체적으로 정확도는 약 3분의 1로 떨어졌으며, 이는 AI 지원이 있는 참가자들이 지원이 없을 때보다 2~3배 더 많이 틀렸다는 것을 의미합니다.

사용자가 스스로 조언을 구하지 않으면 충분합니까?

아닙니다. 이 연구의 핵심 발견 중 하나는 사용자가 의식적으로 요청하지 않아도 AI 제안을 수동적으로 표시하는 것만으로도 동일한 부정적 효과가 발생한다는 것입니다. 이는 사용자가 시스템에 의존하기로 선택하는 고전적인 『자동화 편향』과 이 현상을 구별합니다. 여기서는 정보의 표시 자체가 인식론적 행동을 변화시킵니다: 사람들은 자신의 불확실성을 정당한 선택지로 평가하지 않게 됩니다. 대조군(AI 없음)과의 비교가 이를 확인합니다: 모든 실험에서 『모르겠다』 응답률의 차이는 통계적으로 유의합니다.

이 발견이 AI 시스템 배포에 왜 중요한가?

결과는 교육, 의료, 법률 시스템에서 AI 인터페이스 설계에 직접적인 영향을 미칩니다—고위험 결정이 사용자의 지식에 기반하는 모든 곳에서. 저자들은 이 효과가 참가자들의 나쁜 의도나 무지에 귀인될 수 없다고 경고합니다: 정확성에 대한 보상이 과잉 의존을 제거하지 못했습니다. 이는 AI 제안의 표시 아키텍처 자체가 기계가 틀렸을 때도 사용자가 인지적 책임을 기계에 위임하도록 촉진한다는 것을 시사합니다. 연구는 사용자에게 불확실성의 가시성을 되돌려주는 규제적·설계적 개입을 촉구합니다.