隨著媒介產(chǎn)品的全球化趨勢(shì)，國(guó)外引進(jìn)電影、電視節(jié)目和游戲的配音正在成為一個(gè)正在高速增長(zhǎng)的領(lǐng)域。根據(jù)Verified Market Research，僅電影配音市場(chǎng)的價(jià)值從2020年就開(kāi)始以5.6%的復(fù)合年增長(zhǎng)率增長(zhǎng)，到2027年可達(dá)36億美元?？紤]到請(qǐng)演員進(jìn)行錄音室配音的成本高昂，人工智能技術(shù)有望通過(guò)自動(dòng)化配音來(lái)簡(jiǎn)化配音的流程。

據(jù)VentureBeat報(bào)道，AI配音技術(shù)公司「Deepdub」昨日宣布在A輪融資中籌集了2000萬(wàn)美元，由nsight Partners領(lǐng)投，Booster Ventures、Stardom Ventures、Swift VC和部分天使投資者跟投。

圖片截自公司官網(wǎng)

Deepdub成立于2019年，由來(lái)自以色列的Nir Krakowski和Ofir Krakowski兄弟共同創(chuàng)立，總部位于特拉維夫。該公司為電影、電視、游戲和廣告提供人工智能配音服務(wù)，這種技術(shù)由神經(jīng)網(wǎng)絡(luò)驅(qū)動(dòng)，可以分割、隔離原始聲音并將配音替換進(jìn)原始軌道中。

Deepdub試圖實(shí)現(xiàn)一種“克隆式”的配音方法，在加入新配音的同時(shí)保留演員原始的聲音。它使用基于另一種語(yǔ)言的演員聲音合成樣本，并與原始演員的聲音分層合成形成配音。該公司正在研究使可以一次性匹配多種語(yǔ)言的唇部運(yùn)動(dòng)的算法，雖然這種算法還不能實(shí)現(xiàn)實(shí)時(shí)配音，但可以在后期制作系統(tǒng)中使用。

Nir Krakowski表示，其人工智能模型能夠利用不超過(guò)三分鐘的語(yǔ)音數(shù)據(jù)復(fù)制語(yǔ)音特征，生成的目標(biāo)語(yǔ)言的聲音可以展示出高度的表現(xiàn)力，包括哭泣、喊叫、嘴里含著食物說(shuō)話等，這種表現(xiàn)力甚至是原始語(yǔ)音中不具備的。

圖片截自公司官網(wǎng)

Deepdub配音的首部作品是2019年的英語(yǔ)驚悚片 "Every Time I Die"，Deepdub參與其西班牙語(yǔ)和葡萄牙語(yǔ)配音制作。

據(jù)悉，公司正在與多個(gè)好萊塢電影公司合作開(kāi)展各種項(xiàng)目，這些項(xiàng)目目前是專有的。自從2020年12月公開(kāi)發(fā)布以來(lái)，Deepdub已經(jīng)與Topic.com簽訂了一個(gè)多系列的合作，將他們的外國(guó)電視節(jié)目目錄引入英語(yǔ)。

最新的資金將用于擴(kuò)大公司的全球銷售和交付團(tuán)隊(duì)，雇傭更多的研究人員和開(kāi)發(fā)人員來(lái)加強(qiáng)特拉維夫的研發(fā)團(tuán)隊(duì)，并進(jìn)一步加強(qiáng)公司基于深度學(xué)習(xí)的本地化平臺(tái)。公司在2021年初有7名員工，在2022年初增長(zhǎng)到30多人，預(yù)計(jì)到今年年底將使人員規(guī)模翻番。

與Deepdub同樣專注于視頻和語(yǔ)音，開(kāi)發(fā)AI配音工具的公司包括「Synthesia」、「Respeecher」、「Resemble AI」和「Papercup」。此外，老牌企業(yè)「Nvidia」正在開(kāi)發(fā)一項(xiàng)基于演員原面部表情進(jìn)行細(xì)微改變，使之與新的語(yǔ)言相匹配的技術(shù)；「Veritone」則推出了一個(gè)名為「Marvel.ai」的平臺(tái)，允許內(nèi)容制作者創(chuàng)造和授權(quán)AI生成的聲音。

人工智能技術(shù)正在加速進(jìn)入配音領(lǐng)域，未來(lái)這種方式能否代替演員的錄音室配音，又會(huì)帶來(lái)多少和語(yǔ)言相關(guān)的法律、倫理問(wèn)題，或許目前尚不能輕易地下結(jié)論。

關(guān)鍵詞：