當前位置: 華文頭條 > 推薦

「2024年新型數碼服務優秀案例名單」釋出

2024-06-21推薦

6月18日,工業和資訊化部資訊通訊管理局公布「2024年新型數碼服務優秀案例名單」,由愛奇藝申報、北京市通訊管理局推薦的「基於大模型的影視劇配音智能解決方案,助力影視劇工業化和智能化發展」案例入選。此次入選,進一步證明愛奇藝在服務質素、使用者體驗、技術創新、社會效益等方面的工作成效和數碼服務能力。

2024年新型數碼服務優秀案例部份名單

愛奇藝具有自主知識產權的奇聲影視劇智能配音系統(以下簡稱「奇聲系統」),將AI套用於影視劇配音制作。現階段,奇聲系統由智能配音預處理、智能多語種配音變聲和智能配音後期處理三大技術支撐,包含了多個AI演算法模組和豐富的功能模組。使用該系統,既能一站式完成影視劇作品的配音,也可以透過各獨立功能來處理不同環節的需求。根據工信部申報要求,本次獲評案例不僅需要客觀真實、具有實效,還需具備創新性,可以為新型數碼服務提供示範指引。

智能配音預處理技術對前期素材準備工作提效明顯,包括對多語種字幕進行角色拆分,為原始音軌進行智能分軌等。透過聲紋比對等技術手段,系統還能智能選取與原版角色最為相近的音色,讓角色配音更加「貼臉」。智能多語種配音變聲技術則以基於深度學習的語音轉換技術為核心,將單一的語音音軌轉換為多音色、多語種、多風格的語音音軌,讓配音員可以輕松變身任意目標角色,配音更具表現力。同時,該技術支持包括中文、泰語、越南語等多語種變聲,並針對各語種進行了專門訓練。在傳統制作流程中,為了達到影視劇上線的要求,配音完成後還需要制作人員對幹聲進行後期處理以保證質素。奇聲系統的智能配音後期處理技術可以對音質、音量、音效進行快速處理,將制作人員從重復工作中解放出來。

據奇聲產研團隊負責人介紹,奇聲系統的技術核心是基於深度神經網絡和大模型技術的Voice Conversion技術,該技術在近年來得到了一定程度的發展,但在影視劇這類高表現力場景的效果仍有待提高。

作為國內代表性的網絡視聽新媒體平台,愛奇藝深入影視劇內容生產的各環節,持續挖掘以技術創新提質增效的空間。目前,奇聲系統已經為超過300部海外電影制作了普通話配音版本,為50多部華語電影、800多集國劇制作了多國配音版本。在科技創新的助力下,影視劇配音工作日益智能化,有效縮短了出海國劇及引進內容的上線時間,支持了更多好內容「引進來、走出去」,進一步滿足了海內外使用者的內容消費需求。

隨著大語言模型和生成式AI的快速發展,內容生產效率有望進一步提升,優秀創意和卓越審美的重要性越發凸顯。愛奇藝技術長劉文峰曾公開表示,「現階段生成式AI產出的內容創意性依然偏弱。內容產業從業者在關註套用AI提升內容生產效率的同時,還需更進一步去思考AI可以如何幫助專業內容創作者提升創意水平。」為此,愛奇藝將自身龐大的影視資料數據與大模型結合進行訓練和微調,為影視產業場景開發生成式AI的垂類套用,以此支持更多創作者釋放創意。(王超)