Hallo 是一個由復(fù)旦大學(xué)、百度、蘇黎世聯(lián)邦理工學(xué)院和南京大學(xué)聯(lián)合開發(fā)的開源項目,專注于音頻驅(qū)動的視覺合成技術(shù),能夠?qū)D像轉(zhuǎn)化為動畫,使圖片“開口說話”,并同步音頻情感變化。該項目在 AI 領(lǐng)域具有廣泛應(yīng)用,如虛擬偶像、影視制作、教育、游戲開發(fā)等 。
- Hallo開源項目網(wǎng)址:https://github.com/fudan-generative-vision/hallo
- Hallo官網(wǎng)入口網(wǎng)址:https://fudan-generative-vision.github.io/hallo/#/

Hallo 的技術(shù)特點:采用端到端擴散范式,通過分層音頻驅(qū)動視覺合成模塊,實現(xiàn)對表情和姿勢的自適應(yīng)控制。項目支持多種使用方式,包括原生安裝、簡化版本(如 hallo-webui 和 ComfyUI-Hallo)以及在線演示。
Hallo 的應(yīng)用場景:適用于虛擬偶像、影視制作、教育、游戲開發(fā)、人機交互等領(lǐng)域 。
相關(guān)導(dǎo)航
暫無評論...