NVIDIA i Siemens Healthineers: NV-Raw2Insights-US uči direktno iz raw ultrasound signala i korigira sliku u real-timeu
Zašto je bitno
NV-Raw2Insights-US je AI model NVIDIA-e i Siemens Healthineers-a koji uči direktno iz raw ultrasound channel signala — prije tradicionalnog beamforming-a — i u jednom AI prolazu generira pacijentu prilagođenu mapu brzine zvuka kroz tkivo. Mapa se koristi za adaptivno fokusiranje slike u live snimanju. Model, weights i dataset objavljeni su otvoreno na HuggingFaceu i GitHubu, deploy preko NVIDIA Holoscan-a i Blackwell GPU-a.
NVIDIA i istraživači iz Siemens Healthineers-a objavili su 28. travnja 2026. NV-Raw2Insights-US — model koji preokreće tradicionalni ultrasound pipeline. Klasični beamforming komprimira milijune ehoa s ultrasound probe u finalnu sliku, uz pretpostavke fizike (npr. konstantnu brzinu zvuka kroz tijelo). NV-Raw2Insights-US uči prije te kompresije, direktno iz raw channel data.
Što model konkretno radi?
U ovoj prvoj Raw2Insights aplikaciji NVIDIA i Siemens estimiraju brzinu zvuka kroz tkivo za adaptivno image fokusiranje. Sustav generira pacijentu specifičnu mapu sound-speed-a u jednom AI prolazu i streama je nazad u skener za korekciju slike u live snimanju. Ono što je dosad zahtijevalo kompleksan compute postaje single-pass inference. Suradnja sa Siemens Healthineers-om vodili su Ismayil Guracar i Rickard Loftman iz AI & Advanced Platforms grupe.
Kako je deployiran?
Raw ultrasound channel data nije lako dostupan na kliničkim skenerima jer je signal vrlo visokog bandwidth-a. NVIDIA-in Holoscan Sensor Bridge (HSB), open-source FPGA IP, prebacuje podatke u GPU memoriju preko RDMA over Converged Ethernet s niskom latencijom. Demonstracija koristi Altera Agilex-7 FPGA development kit, ACUSON Sequoia skener (Siemens), i tehnologiju koju NVIDIA naziva “Data over DisplayPort” — streaming sirovih signala kroz DisplayPort izlaz skenera. Inferencija ide na Blackwell-class GPU unutar NVIDIA IGX Thor ili DGX Spark sustava, pod NVIDIA Holoscan edge AI platformom.
Što je objavljeno otvoreno?
NVIDIA je objavila kompletan istraživački paket otvoreno: GitHub (github.com/NVIDIA-Medtech/NV-Raw2insights-US), model weights (huggingface.co/nvidia/NV-Raw2Insights-US) i dataset (huggingface.co/datasets/nvidia/NV-Raw2Insights-US). Detaljne benchmark brojke ili klinička validacija nisu uključene u ovaj announcement — fokus je arhitekturalni i konceptualni. NVIDIA naglašava: tehnologija je u investigativnom razvoju i nije klinički odobrena. Šira poruka: “AI-native imaging” pristup koji uči iz fizike svakog pacijenta umjesto iz unaprijed obrađenih slika može postati modularna osnova za sljedeću generaciju AI-driven dijagnostičkih sustava.
Ovaj članak generiran je uz pomoć umjetne inteligencije na temelju primarnih izvora.
Povezane vijesti
arXiv:2604.21764: 'Thinking with Reasoning Skills' smanjuje broj reasoning tokena uz veću točnost na ACL 2026 Industry Tracku
Thinking with Reasoning Skills (ACL 2026 Industry Track): manje tokena, veća točnost kroz dohvat skilsova zaključivanja
DeepSeek objavio V4-Pro i V4-Flash: dva open-source modela s milijun tokena konteksta i 80,6 na SWE Verified