0514(Update)圖生影片阿里巴巴開源 Ditto-Talkinghead數位人

加好友 · 發表於 2025-5-14 19:22

馬上加入Android 台灣中文網，立即免費下載應用遊戲。

您需要登錄才可以下載或查看，沒有帳號？註冊

x

本帖最後由 Ho7121 於 2025-5-15 05:14 編輯

軟體名稱:Ditto-Talkinghead(附影片)
版本類型: 一鍵啟動
軟體版本: New
軟體語言: 多語繁
檔案大小:9.18GB存放空間:Katfile

登錄/註冊後可看大圖

別再下載!
好像有問題(多數人都生成不了)
可以啟動但無法運行.
建議使用其他類似APP:
latentsync,Sonic,Heygem

登錄/註冊後可看大圖

5_05.jpg (59.09 KB, 下載次數: 8)

下載附件保存到相冊

2025-5-14 16:26 上傳

登錄/註冊後可看大圖

Ditto-Talkinghead阿里巴巴開源的即時可控說話合成框架.mp4_20250514_162808.485.jpg.jpg (155.65 KB, 下載次數: 6)

下載附件保存到相冊

2025-5-14 16:28 上傳

Ditto 是由阿里巴巴開源的即時可控說話合成框架。只需要上傳一張圖像和一段音訊，即可實現了高精度、低延遲的說話頭動畫生成。
Ditto 支持真人、二次元、虛擬IP等全場景適配，可創建多樣化數位分身，還支援歌曲驅動生成，更具備精細控制頭部表情動作，比如凝視、頭部姿勢、情緒等，除了驅動頭部，還支持半身和全身肖像。
Ditto 羽量級推理引擎僅需4GB顯存即可運行，相容主流消費級顯卡，實測10秒的音訊生成基本在30秒內可以完成，老顯卡也能快速完成推理生成。

技術特點 ‌
即時可控合成‌：Ditto通過優化音訊特徵提取、運動生成和視頻合成三個關鍵元件，實現了即時推理和低首幀延遲。支持對合成說話的精細控制，如目光、頭部姿態和情感表達。 ‌
高精度動畫生成‌：採用擴散模型生成細膩的表情和自然的頭部動作，與音訊信號高度同步。解決了傳統方法中推理速度慢、面部運動控制不夠精細以及視覺偽影等問題。 ‌
顯式身份無關運動空間‌：通過引入顯式身份無關運動空間，替代了傳統的變分自編碼器（VAE）表示。這一設計降低了擴散學習的複雜性，同時提高了合成說話頭的可控性和逼真度。 ‌
多風格與個性化適配‌：Ditto支援多種風格的說話頭動畫生成，滿足不同應用場景的需求。通過線上模仿學習機制，可快速適配個性化交互需求，如虛擬形象風格定制。

應用領域 ‌
虛擬助手與AI客服‌：Ditto能夠生成與語音同步的高保真說話頭動畫，為虛擬助手和AI客服提供逼真的交互體驗。適用于電商直播、線上服務等場景，增強使用者互動感。 ‌
娛樂與遊戲‌：在短視頻平臺、遊戲NPC等娛樂場景中，Ditto可用于生成個性化的虛擬形象。支持多種風格的表情與動作，提升娛樂內容的趣味性和多樣性。 ‌
教育與培訓‌：線上教育平臺可利用Ditto技術創建虛擬教師，為學生提供沉浸式學習體驗。支援多語言虛擬主持人功能，適用於國際教育和跨文化交流。 ‌
企業服務與行銷‌：企業可利用Ditto生成虛擬發言人，用於會議記錄、產品發佈等場景。定制化虛擬形象有助於品牌塑造和市場推廣。

下載(進門左邊0514)

加好友 · 發表於 2025-5-14 19:55

感謝提供分享，謝謝。

加好友 · 發表於 2025-5-14 20:55

提示: 作者被禁止或刪除內容自動屏蔽

[影片工具] 0514(Update)圖生影片阿里巴巴開源 Ditto-Talkinghead數位人

馬上加入Android 台灣中文網，立即免費下載應用遊戲。

評分

相關帖子

瀏覽過的版塊

[影片工具] 0514(Update)圖生影片 阿里巴巴開源 Ditto-Talkinghead數位人

馬上加入Android 台灣中文網，立即免費下載應用遊戲。

評分

相關帖子

瀏覽過的版塊

[影片工具] 0514(Update)圖生影片阿里巴巴開源 Ditto-Talkinghead數位人