阿里巴巴推出 Emote Portrait Alive(EMO):給圖片加上音頻,生成生動的肖像視頻
又一王炸新AI技術出現!阿里巴巴集團的研究人員最近推出了一個令人驚艷的AI框架,名為Emote Portrait Alive(EMO)。
據悉,這個框架可以將一張靜態的肖像照片和音頻結合,生成具有表情變化和頭部動作的生動肖像視頻。
我們立即看看sample影片吧!
去片:
Alibaba presents EMO: Emote Portrait Alive
Generating Expressive Portrait Videos with Audio2Video Diffusion Model under Weak Conditions
tackle the challenge of enhancing the realism and expressiveness in talking head video generation by focusing on the dynamic and nuanced… pic.twitter.com/pGw7389Saq
— AK (@_akhaliq) February 28, 2024
以下是 EMO 的一些特點:
- 音頻驅動:EMO 可以根據音頻生成肖像視頻,無需中間的3D模型或面部特徵點。
- 無縫過渡:EMO 確保視頻的每一幀之間都有無縫的過渡,並保持一致的身份特徵,使動畫更加生動和逼真。
- 多樣性風格:EMO 不僅可以生成說話的視頻,還可以生成唱歌的視頻,並且風格多樣,遠遠超越現有的技術。
這一突破性的技術將為肖像視頻生成帶來更高的表現力和真實感。無論是說話還是唱歌,EMO 都能讓肖像活起來。
[完]
對於以上消息,各位298電腦讀者又怎看呢?
歡迎到我們的<<討論區>>分享你的意見。
另外,如果你有什麼新的資訊想讓廣大的電腦愛好者知道,也可以主動向我們編輯部電腦記者報料,報料電郵:info@wanchai298.com
灣仔298電腦資訊網
免費網上電腦雜誌,電腦IT人集中地!
網址:www.wanchai298.com