Hallo 是一個(gè)由復(fù)旦大學(xué)、百度、蘇黎世聯(lián)邦理工學(xué)院和南京大學(xué)聯(lián)合開(kāi)發(fā)的開(kāi)源項(xiàng)目,專(zhuān)注于音頻驅(qū)動(dòng)的視覺(jué)合成技術(shù),能夠?qū)D像轉(zhuǎn)化為動(dòng)畫(huà),使圖片“開(kāi)口說(shuō)話”,并同步音頻情感變化。該項(xiàng)目在 AI 領(lǐng)域具有廣泛應(yīng)用,如虛擬偶像、影視制作、教育、游戲開(kāi)發(fā)等 。
- Hallo開(kāi)源項(xiàng)目網(wǎng)址:https://github.com/fudan-generative-vision/hallo
- Hallo官網(wǎng)入口網(wǎng)址:https://fudan-generative-vision.github.io/hallo/#/

Hallo 的技術(shù)特點(diǎn):采用端到端擴(kuò)散范式,通過(guò)分層音頻驅(qū)動(dòng)視覺(jué)合成模塊,實(shí)現(xiàn)對(duì)表情和姿勢(shì)的自適應(yīng)控制。項(xiàng)目支持多種使用方式,包括原生安裝、簡(jiǎn)化版本(如 hallo-webui 和 ComfyUI-Hallo)以及在線演示。
Hallo 的應(yīng)用場(chǎng)景:適用于虛擬偶像、影視制作、教育、游戲開(kāi)發(fā)、人機(jī)交互等領(lǐng)域 。
相關(guān)導(dǎo)航
暫無(wú)評(píng)論...



