arXiv:2605.25603: CIE-Scorer otkriva kada je lančano razmišljanje LLM-ova neispravno prikazano

Koji problem CIE-Scorer rješava?

Xu Shen, Zhen Tan, Song Wang, Pingjun Hong, Rui Miao, Xin Wang i Tianlong Chen predstavili su CIE-Scorer — okvir za detekciju nevjernih lanaca razmišljanja (unfaithful Chain-of-Thought, CoT) u velikim jezičnim modelima (LLM).

Lančano razmišljanje (Chain-of-Thought, CoT) je tehnika u kojoj se LLM model potiče da napiše korak-po-korak obrazloženje prije konačnog odgovora. Problem je što ovo vidljivo obrazloženje ne mora nužno reflektirati stvarni računalni proces modela — model može prikazivati jednu logiku dok zapravo koristi drugu. Takva neispravna prikazivanja otežavaju interpretabilnost i povjerenje u AI sustave.

Kako radi CIE-Scorer i što ga razlikuje od dosadašnjih metoda?

Dosadašnje metode detekcije nevjernih CoT tragova oslanjale su se primarno na vanjske signale poput tekstualne uvjerljivosti. CIE-Scorer (Circuit-guided Internal-External discrepancy Scorer) integrira mehanističku interpretabilnost — analizu internih računalnih struktura modela — s vanjskom analizom rezoniranja.

Konkretno, CIE-Scorer:

• Gradi kompaktne krugove (circuits) od važnih tokena rezoniranja na razini rečenica, umjesto skupih punih krugova cijelog modela
• Razvija unutarnje i vanjske grafove razmišljanja koji predstavljaju kako model interno obrađuje informacije
• Mjeri divergenciju između tih grafova koristeći Fused Gromov-Wasserstein udaljenost (matematička mjera razlike između grafovskih struktura)
• Radi na razini instance — za svaki uzorak zasebno, bez potrebe za skupim agregatnim statisikama

Koji su rezultati i zašto su važni za razvoj AI sustava?

CIE-Scorer postiže state-of-the-art rezultate na četiri skupa podataka iz FaithCoT-Bench benchmark kolekcije uz znatno niže računalne troškove od prethodnih metoda, ponajprije zato što koristi kompaktne krugove umjesto punih krugova (koje su računski skupi za izgradnju na velikim modelima).

Sposobnost pouzdanog otkrivanja nevjernih CoT tragova ključna je za primjenu LLM-ova u visokorizičnim scenarijima gdje je transparentnost i auditabilnost obrazloženja neophodna — primjerice u medicini, pravu ili financijama.