Nvidia genera scene chirurgiche che seguono i movimenti degli strumenti
Cosmos3-H-Dreams impara da interventi reali e genera video chirurgici interattivi su una singola GPU. I movimenti degli strumenti cambiano la scena; la risposta fisica dei tessuti resta da verificare.
Che succede
In Cosmos3-H-Dreams, due sequenze possono partire dalla stessa immagine di un intervento e proseguire diversamente in base ai movimenti degli strumenti. Il modello di Nvidia genera le immagini successive mentre riceve i comandi.
Presentato il 20 ottobre, ha imparato da video e movimenti robotici registrati durante interventi di rimozione della colecisti. Risponde ai comandi di due strumenti e può funzionare in modo interattivo su una singola GPU RTX PRO 6000. I ricercatori possono cambiare le traiettorie e osservare la continuazione generata.
Il realismo delle immagini apre una questione ancora irrisolta: quanto le deformazioni dei tessuti corrispondano alle forze applicate. Collegare il modello a simulazioni fisiche e valutarlo con i chirurghi rientra nei prossimi obiettivi di ricerca; manca ancora una validazione clinica.
Perché conta
Le registrazioni degli interventi diventano materiale per esplorare traiettorie alternative: la stessa scena può continuare seguendo una mossa diversa del ricercatore.
Leggi la fonte
NvidiaVuoi sapere di più su pillole come questa?
Nella stessa edizione
ChatGPT ha un modello separato che cerca il momento per un annuncio
Granite Speech aggiunge l’italiano al modello da 470 milioni di parametri
llm-d 1.0 mette ordine nelle code dei modelli condivisi
Google Cloud venderà anche i modelli OpenAI, accanto a Gemini
Gemini ricorda lo stile del marchio fra un’immagine e la successiva
Nvidia genera scene chirurgiche che seguono i movimenti degli strumenti
FairStress misura quali decisioni un’AI è più disposta a cambiare
TorchTPU porta i chip di Google dentro PyTorch
Con Voxtral 3 Mistral collega la conversazione ai servizi
Prossima Pillola