arXiv:2607.09532：심층 신경망의 통계적으로 탐지 불가능한 백도어（ICML 2026）

세 연구자——Bogdanov, Rosen, Vafa——의 ICML 2026 채택 논문은 AI 안전성에서 가장 우려스러운 형식적 결과 중 하나를 제시합니다: 검사자가 모델의 모든 매개변수에 완전히 접근할 수 있는 경우에도 심층 신경망의 백도어가 통계적으로 탐지 불가능할 수 있다는 수학적 증명입니다.

백도어와 화이트박스란 무엇이며, 왜 이 연구가 중요한가?

백도어는 머신러닝 모델에 의도적으로 내장된 숨겨진 취약점입니다——공격자는 모든 표준 입력에 대해 정상적으로 동작하면서도 특정 숨겨진 트리거에 대해 예측 가능하고 공격자에게 유리한 방식으로 반응하도록 모델을 훈련시킵니다. 화이트박스 시나리오는 검사자, 규제 기관, 사용자가 모델의 모든 가중치와 아키텍처에 완전히 접근할 수 있는 상황을 가리킵니다——입력과 출력만 볼 수 있는 블랙박스 접근과 반대됩니다.

지금까지는 화이트박스 검사가 강력한 보호를 제공한다고 여겨졌습니다: 모든 것을 볼 수 있다면 의심스러운 패턴을 찾을 수 있어야 한다고. Bogdanov, Rosen, Vafa는 이것이 사실이 아님을 증명합니다.

공격 메커니즘과 암호학적 기반

저자들이 구성하는 백도어는 공격자에게 『불변성 기반 적대적 예시』를 생성하는 능력을 줍니다——비밀 키를 가진 공격자 외에 모든 관찰자에게 정당한 입력과 구별할 수 없는 예시입니다. 입력을 가시성 한계까지 변경하는 고전적인 적대적 공격과 달리, 이러한 예시들은 통계적으로 정상 데이터처럼 보입니다.

핵심 암호학적 증명은 다음과 같습니다: 백도어를 알지 못하고는 표준 암호학적 가정（예: 인수분해 또는 이산 로그 문제의 어려움）하에서 다항 시간 내에 이러한 적대적 예시를 생성하는 것이 불가능합니다. 이는 백도어를 비대칭적 무기로 만듭니다——비밀 키를 가진 공격자는 정당한 사용자가 복제하거나 통계적으로 탐지할 수 없는 능력을 가집니다.

훈련자와 사용자 간의 근본적인 권력 비대칭

이 연구의 가장 광범위한 결론은 기술적인 것이 아니라 구조적인 것입니다: 모델을 훈련시키는 자는 사용자가 얼마나 많은 검사 자원을 투입하더라도 도달할 수 없는 능력을 가진다는 것입니다. 이 비대칭성은 사후 처리 탐지 도구로는 해소할 수 없습니다. 주어진 가정하에서 그러한 도구는 수학적으로 존재할 수 없음이 증명되었기 때문입니다.

실제로 이는 제3자가 훈련한 모델을 사용하는 조직들——사실상 모든 상업적 AI 사용자를 포함합니다——이 기술 검사의 깊이에 관계없이 사용 중인 모델이 클린하다고 확신할 수 없음을 의미합니다. 저자들은 구체적인 해결책을 제시하지 않고, AI 모델 공급망 보안에 관한 가정들을 재검토할 것을 커뮤니티에 촉구합니다.