近日據(jù)媒體報道，嗶哩嗶哩(B站)正式推出自研的“AI原聲翻譯功能”。該功能利用突破性的語音生成與視頻重構(gòu)技術(shù)，精準還原UP主獨特的聲線、音色和氣口，并實現(xiàn)翻譯語言與口型的自然同步，為游戲、科技、二次元等核心內(nèi)容的跨語言傳播提供了創(chuàng)新解決方案。
區(qū)別于傳統(tǒng)機器翻譯的生硬感，B站AI原聲翻譯的核心優(yōu)勢在于“原汁原味”的本地化處理。其核心技術(shù)基于內(nèi)部研發(fā)的語音生成模型，通過創(chuàng)新的語音時長與情感控制方法，精確調(diào)控語音節(jié)奏，并分離情感表達與說話人身份特征。這確保了翻譯后的語音既保留UP主的個人風(fēng)格，又自然貼合目標語言的韻律習(xí)慣。
在口型同步與字幕處理方面，技術(shù)團隊結(jié)合先進的智能視頻處理技術(shù)，精準擦除原字幕區(qū)域并進行高還原度重繪，使翻譯后的口型與語音內(nèi)容完美匹配。針對游戲術(shù)語、二次元梗點等翻譯難點，功能引入了深度挖掘技術(shù)，結(jié)合大語言模型構(gòu)建的翻譯引擎，將專有名詞與文化梗的翻譯準確率提升至90%，有效解決了跨文化傳播中的“笑點斷層”問題。
目前，該功能已支持中英雙語互譯，全面覆蓋站內(nèi)視頻、直播彈幕及界面按鈕，日均處理數(shù)十萬條非中文內(nèi)容翻譯需求。據(jù)B站技術(shù)團隊透露，后續(xù)計劃將支持日語、韓語等近10種語言，進一步強化對ACG文化圈的覆蓋能力。
B站董事長兼CEO陳睿表示，該功能是平臺“內(nèi)容無國界”戰(zhàn)略的關(guān)鍵落地。此前，B站已完成國內(nèi)版與國際版APP的合并，并積累了豐富的文化元素本地化經(jīng)驗。此次AI原聲翻譯功能的推出，標志著B站在跨語言技術(shù)布局上已全面成熟。
業(yè)內(nèi)分析指出，B站AI原聲翻譯功能通過多目標優(yōu)化與強化學(xué)習(xí)技術(shù)，首次實現(xiàn)了“翻譯準確性-聲線還原度-口型匹配度”三者的高度協(xié)同，為長視頻平臺樹立了新的技術(shù)標桿。
對UP主而言，該功能將顯著降低內(nèi)容出海的語言門檻，特別惠及游戲解說、動畫測評等依賴“人設(shè)聲線”的創(chuàng)作者。對于用戶，無論是中文用戶觀看外語內(nèi)容，還是海外用戶體驗中文視頻，都能獲得近乎“無字幕隔閡”的沉浸式體驗。
本文鏈接：http://jphkf.cn/news-15-5348-0.htmlB站推出AI原聲翻譯：自動生成UP主英文聲線及字幕
聲明：本網(wǎng)頁內(nèi)容由互聯(lián)網(wǎng)博主自發(fā)貢獻，不代表本站觀點，本站不承擔(dān)任何法律責(zé)任。天上不會到餡餅，請大家謹防詐騙！若有侵權(quán)等問題請及時與本網(wǎng)聯(lián)系，我們將在第一時間刪除處理。
點擊右上角
微信好友
朋友圈
點擊瀏覽器下方“
”分享微信好友Safari瀏覽器請點擊“
”按鈕
點擊右上角
QQ
點擊瀏覽器下方“”分享QQ好友Safari瀏覽器請點擊“”按鈕
