DiffusionGemma u vLLM: prvi diskretni difuzijski model od 26 milijardi parametara integriran u produkcijsko okruženje
DiffusionGemma je model s 26 milijardi parametara koji umjesto klasičnog lijevo-desno generiranja teksta iterativno pročišćava platno od 256 tokena. Timovi vLLM-a, Google DeepMinda i NVIDIA-e postigli su 1.288 tokena u sekundi na H200 GPU-u — otprilike šest puta brže od autoregresivnih usporednih modela.