arXiv:2607.17779: MIND okvir zaobilazi obranu text-to-image modela stopom uspješnosti napada od 95,62%

Što je MIND framework i kako generira adversarial promptove?

Dongdong Yang i suradnici u radu “Dynamic Defense Profiling Enables Cognitive Jailbreak of Text-to-Image Models” (arXiv:2607.17779) predstavljaju MIND, okvir koji generiranje adversarial promptova tretira kao belief-state inference — zaključivanje o skrivenom, latentnom stanju obrambenog mehanizma modela. Jailbreak je tehnika zaobilaženja sigurnosnih filtera modela kako bi se generirao sadržaj koji bi inače bio blokiran, a adversarial prompt je tekstualni unos posebno oblikovan da tu obranu prevari. MIND se sastoji od tri komponente: Multi-modal Judge koji dekomponira povratnu informaciju iz odgovora modela, Defense Profiler koji iterativno ažurira uvjerenje o obrambenom mehanizmu i Meta-Memory modul koji dohvaća povijesno uspješne strategije napada.

Stopa uspješnosti napada od 95,62% na Stable Diffusion v1.5

Na modelu Stable Diffusion v1.5 MIND postiže Attack Success Rate (ASR), odnosno stopu uspješnosti napada, od 95,62% — i to čak uz razne konfiguracije obrane koje bi trebale spriječiti generiranje zabranjenog sadržaja. Autori navode usporedive rezultate i na komercijalnim text-to-image sustavima, što sugerira da problem nije ograničen samo na jedan open-source model.

Očekivana zaštita naspram stvarne probojnosti

Rezultat od 95,62% ASR stoji u oštroj suprotnosti s pretpostavkom da obrambeni mehanizmi pružaju pouzdanu zaštitu. Umjesto fiksnih, unaprijed pripremljenih promptova, MIND ih dinamički prilagođava na temelju povratne informacije iz samog modela, uči obrazac ponašanja obrane tijekom napada i tako zaobilazi čak i konfiguracije osmišljene posebno protiv poznatih napada.

Zašto je nalaz relevantan za sigurnost generativnih modela

Rad pokazuje da statički filteri i fiksne liste zabranjenih riječi ne mogu pratiti napadače koji obrambeni mehanizam promatraju kao sustav čije se skriveno stanje može zaključiti i iskoristiti. Nalaz upućuje na to da developeri text-to-image alata trebaju testirati obranu protiv adaptivnih, a ne samo statičkih napada.