阿里巴巴宣布其項目DreamTalk已經開源。這個項目可以讓人物照片說話,支持包括歌曲、多種語言的語音、嘈雜的音頻在內的各種聲音匹配。
這個項目的開源意味著更多的開發者和研究人員可以使用這項技術,為其添加新的功能或者進行改進。DreamTalk的開源將為語音合成技術的發展帶來新的動力。
DreamTalk能夠生成高質量的動畫,使人物臉部動作看起來非常真實。除了逼真的嘴唇動作,它還能展現豐富的表情,使動畫更加生動。此外,DreamTalk支持多種語言,無論是中文、英文還是其他語言,都能很好地同步。
另外,DreamTalk還具有說話風格預測的功能,能夠根據語音預測說話者的風格,并同步表情,使得動畫更加貼近原始音頻。此外,該框架適用于多種場景,可以用于歌曲、不同類型的肖像,甚至在嘈雜環境中也能表現良好。


產品與服務
聯系站長
關于我們