arXiv:2606.20521: Egocentrični video čovjeka nadmašuje robotske podatke za predobuku utjelovljenih AI modela

Egocentrični video čovjeka kao predobučidbeni izvor za robotiku

Egocentrični video (snimljen iz perspektive prvog lica dok čovjek obavlja svakodnevne aktivnosti) dosad je u robotici bio podcjenjen kao izvor predobučidbenih podataka. Istraživanje HumanScale, koje potpisuje 21 ko-autor s Peking Universityja i MITa, to sada mijenja sustavnom, kvantitativnom usporedbom.

Rad je podnesen 18. lipnja 2026. i objavljen dan kasnije na arXiv platformi (arXiv:2606.20521).

Ključni rezultati: +90 % na zadacima van distribucije

Modeli predobučeni na filtriranom egocentričnom videu čovjeka postigli su:

• 24 % niži validation loss u odnosu na modele predobučene na teloperiranim robotskim podacima,
• 52,5 % veći uspjeh na zadacima unutar distribucije (in-distribution),
• 90 % veći uspjeh na zadacima manipulacije robotom van distribucije (out-of-distribution).

Usporedba je direktna: isti arhitekturalni okvir utjelovljenog temelja, jedina razlika je izvor predobučidbenih podataka — filtrirani egocentrični video čovjeka naspram teleoperiranih robotskih demonstracija.

Zašto robotski podaci zaostaju

Teleoperiranim robotskim podacima nedostaje raznolikost. Skupljanje takvih podataka skupo je, sporije i geografski ograničeno. Egocentrični video, nasuprot tome, postoji u ogromnim količinama (EGO4D, EPIC-Kitchens i slični skupovi) i prirodno pokriva širok raspon manipulativnih radnji iz perspektive prve osobe — gotovo identične onoj što je robot „vidi” vlastitim kamerama.

Predložena paradigma predobuke

HumanScale predlaže dvofazni pristup:

1. Predobuka na velikom skupu filtriranog egocentričnog videa čovjeka — jeftino i skalabilno.
2. Fine-tuning s ograničenim označenim robotskim podacima isključivo radi usklađivanja akcija.

Ovaj pristup potencijalno značajno smanjuje cijenu skupljanja robotskih podataka, što je danas jedna od glavnih prepreka za razvoj generaliziranih robotskih politika.