Kandinsky 6.0 Video genera clip con audio sincronizzato
Sber ha presentato Kandinsky 6.0 Video, un modello che crea brevi filmati insieme a una traccia audio sincronizzata. La generazione può partire da una descrizione testuale o da un’immagine e comprende dialoghi, musica ed effetti ambientali.
Video di cinque secondi con audio e lip sync
La nuova famiglia Kandinsky 6.0 Video produce clip della durata di cinque secondi con audio a 44 kHz. Il modello può associare suoni e musica a ciò che appare nella scena e sincronizzare il parlato con i movimenti delle labbra dei personaggi. Se richiesto, è possibile generare anche un filmato senza audio.
Per avviare la creazione si può inserire un prompt oppure caricare il primo fotogramma, descrivendo poi come dovrebbe suonare la scena: per esempio con una conversazione, il vento, passi o il rumore di un’auto. In GigaChat è possibile selezionare la qualità SD, HD o Full HD prima della generazione.
Leggi anche:
Miglioramenti nei movimenti e nelle scene dinamiche
Sber afferma di aver migliorato anche la resa visiva, con movimenti più naturali per persone, animali e veicoli e una gestione più efficace delle scene dinamiche e dei cambi di inquadratura. Il sistema può inoltre cercare immagini di riferimento quando deve rappresentare un soggetto poco noto, usandole per orientare la generazione.
Modelli Lite e Pro disponibili con licenza MIT
Il progetto comprende Kandinsky 6.0 Video Lite, con 3 miliardi di parametri, e Kandinsky 6.0 Video Pro, con 29 miliardi. Il codice e i pesi sono stati pubblicati su GitHub con licenza MIT. La documentazione del progetto indica inoltre l’integrazione con ComfyUI e il supporto vLLM-omni.
La generazione video con audio è disponibile gratuitamente agli utenti di GigaChat. Sber presenta Kandinsky 6.0 Video Pro come il primo modello russo capace di generare video e suono sincronizzati; questa qualifica è attribuita all’azienda.
Ti potrebbe interessare:
Segui guruhitech su:
- Google News: bit.ly/gurugooglenews
- Telegram: t.me/guruhitech
- Facebook: facebook.com/guruhitechfb
- Instagram: instagram.com/guruhitech_official/
- X (Twitter): x.com/guruhitech1
- Bluesky: bsky.app/profile/guruhitech.bsky.social
- Rumble: rumble.com/user/guruhitech
- VKontakte: vk.com/guruhitech
- MeWe: mewe.com/i/guruhitech
- Skype: live:.cid.d4cf3836b772da8a
- WhatsApp: bit.ly/whatsappguruhitech
Esprimi il tuo parere!
Ti è piaciuta questa notizia? Lascia un commento nell’apposita sezione che trovi più in basso e se ti va, iscriviti alla newsletter.
Per qualsiasi domanda, informazione o assistenza nel mondo della tecnologia, puoi inviare una email all’indirizzo [email protected].
Esprimi il tuo parere!
Che ne pensi di questa notizia? Lascia un commento nell’apposita sezione che trovi più in basso e se ti va, iscriviti alla newsletter.
Per qualsiasi domanda, informazione o assistenza nel mondo della tecnologia, puoi inviare una email all’indirizzo [email protected].
Scopri di più da GuruHiTech
Abbonati per ricevere gli ultimi articoli inviati alla tua e-mail.