Capire il servizio LivePortrait su Kuaishou ci dà ora una visione delle sensazioni di Tu Hengyu ritratte in La Terra errante 2.
In una svolta innovativa, Kuaishou, un'azienda tecnologica leader, ha presentato LivePortrait, un progetto rivoluzionario che consente agli utenti di creare brevi video di ritratti con espressioni e azioni trasferite. Il documento corrispondente per LivePortrait si intitola "LivePortrait: animazione del ritratto efficiente con controllo di cuciture e ritaratura".
LivePortrait si è inizialmente concentrato sul trasferimento di espressioni facciali sui ritratti. Tuttavia, ciò che lo distingue da altri progetti simili è la sua capacità di trasferire non solo espressioni, ma anche azioni. Questa funzione è stata paragonata a Sora sin dal suo debutto, ma l'esperienza utente intuitiva studiata per gli utenti cinesi e la velocità di generazione ideale di LivePortrait lo hanno distinto nei trial attuali.
La versione aggiornata di LivePortrait può trasferire in modo fluido le caratteristiche dell'espressione sugli animali, rendendo possibile creare video di gatti e cani adorabili in soli 5-6 minuti. Lo Shiba Inu sullo schermo del computer è il risultato di questa funzione affascinante.
Lo sviluppo di LivePortrait ha coinvolto il team Kling di Kuaishou Technology, l'Università di Zhejiang e l'Università Tsinghua. Dal suo rilascio open source a luglio, LivePortrait ha ricevuto almeno 10.000 stelle e 1.000 biforcazioni su GitHub, dimostrando la sua popolarità nella comunità tecnologica.
L'aggiornamento di LivePortrait è stato annunciato inaspettatamente prima del previsto. Gli esperimenti mostrano che la velocità di generazione di LivePortrait può raggiungere i 12,8 millisecondi, e con ulteriori ottimizzazioni come TensorRT, si prevede che scenderà sotto i 10 millisecondi.
Tuttavia, è importante notare che ognuno dei prodotti menzionati presenta ancora diversi gradi di difetti di generazione. Se le caratteristiche facciali dell'immagine originale non sono abbastanza chiare o l'angolo non è sufficientemente frontale, possono verificarsi difetti nell'output di LivePortrait.
LivePortrait ha migliorato le sue capacità di generazione attraverso l'uso di 69 milioni di fotogrammi di addestramento di alta qualità, addestramento video-immagine misto, aggiornamenti della struttura della rete e miglioramenti del modello di movimento e dell'ottimizzazione. Altri grandi modelli cinesi per la generazione di video includono Follow-Your-Click, Dreamina di ByteDance, Qingying di Zhipu AI, PixVerse V2 di AIsphere e Vimi di SenseTime.
Durante il periodo del Festival dei Fantasmi, LivePortrait può essere utilizzato per far sorridere ancora una volta la persona che si è persa, proprio come prima. Questa funzione unica aggiunge un tocco di emozione e nostalgia al progresso tecnologico.
L'articolo è stato scritto da Chi Meng per 36Kr. Man mano che LivePortrait evolve, promette di rivoluzionare il modo in cui creiamo e interagiamo con i contenuti digitali, rendendolo uno sviluppo eccitante da seguire nell'industria tecnologica.
Leggi anche:
- La società di gioco d'azzardo BlueBet è stata multata da VGCCC con 50.000 dollari australiani per aver violato le regole della pubblicità
- Gli oratori annunciati per l'evento FUEL Manchester 2025
- Concesso l'approvazione per il primo trattamento simile al vaccino contro l'HIV/AIDS nell'UE
- Tre donne anziane, affezionatamente chiamate nonne di Kaha Aden, costituiscono una parte significativa della comunità.
