讓31年前的Beyond超清重現,火山引擎是如何做到的?

21世紀經濟報道 發佈 2022-07-06T10:39:20.606703+00:00

當熟悉的旋律響起,很多歌迷的青春記憶也被喚醒,幾十年前的《真的愛你》現在聽起來依舊激昂,那支開創了一個時代的Beyond樂隊,也依然受人懷念。

文/李楊

「無法可修飾的一對手,帶出溫暖永遠在背後,縱使囉嗦始終關注,不懂珍惜太內疚。」

當熟悉的旋律響起,很多歌迷的青春記憶也被喚醒,幾十年前的《真的愛你》現在聽起來依舊激昂,那支開創了一個時代的Beyond樂隊,也依然受人懷念。

7月3日晚,抖音攜手環球音樂旗下廠牌寶麗金,重現了「Beyond Live 1991生命接觸演唱會」及Beyond紀念音樂會精選內容。

據悉,「生命接觸」演唱會,是Beyond首次在紅磡體育館舉辦的演唱會,也被歌迷們奉為最經典的Beyond演唱會之一。而這次,是該演唱會時隔31年首次被超清修復並重映。數據顯示,當晚在抖音、西瓜視頻、今日頭條、鮮時光TV等平台,累計觀看人次超1.4億。

實際上,受限於拍攝器材、存儲介質及錄音設備技術等因素,當時的演唱會視頻無論是在畫質還是音質上,都已經很難滿足當下觀眾的視聽需求。

而超清修復,是藉助技術手段為經典影像內容注入新的生命力。7月4日,作為Beyond演唱會超清重映的技術支持方,火山引擎的相關負責人從技術角度復盤了演唱會修復過程。

讓經典「新生」

在修復工作開始之前,火山引擎團隊需要先對Beyond演唱會的原始視頻素材進行質量分析,然後根據分析結果,針對性的進行處理。

火山引擎多媒體實驗室研究員趙世傑表示,分析之後發現,這場31年前的演唱會視頻畫面可謂「模糊不清、問題較多」。

首先在拍攝上,早期的錄影設備解析度差,其拍攝的畫面解析度較低並且清晰度差,存在畫面模糊、紋理缺失等問題。同時,因為設備原因,早期拍攝的影片還存在大量的過曝與死黑場景,以及存在較重的底噪。

在壓縮存儲上,早期影片一般採用隔行掃描的方式進行處理、編碼、顯示,該方式會帶來交錯條紋的瑕疵問題,對畫面的美觀性和完整性都有較大影響,並且上個世代的視頻編碼器壓縮效率低,會導致壓縮噪聲和紋理丟失的問題。

另外在音質方面,由於過去的錄音設備技術落後,導致演唱會視頻也出現了噪聲干擾、帶寬不足、混響、響度問題等多個音質問題。

找到問題後,火山引擎需要做的就是逐一解決。趙世傑表示,畫質修復工作主要包括三個方面,分別是去交錯、色彩亮度增強以及人像修復。

「相比傳統去交錯方法一般輸入僅做單交錯幀,火山引擎多媒體實驗室通過大規模數據學習,設計了多幀輸入的神經網絡去交錯算法,更具泛化性,並且細節恢復得更好,運動場景的拉絲情況也能得到更好的解決」,趙世傑說。

而在人像修複方面,火山引擎基於深度學習模型,在消除人臉整體的模糊和壓縮損傷的同時,進一步對人臉關鍵的五官重建,對眼睛、嘴巴、耳朵、皮膚甚至髮絲都進行了細節重建和紋理添加,使得人臉清晰度更高更真實。

對於音質的修復,火山引擎音頻技術團隊研究員舒曉峰表示,主要是降噪算法、音頻超分算法、響度算法修復聲音瑕疵。

具體而言,火山引擎音頻降噪算法針對音樂場景和人聲場景實現了一個兼容的AI降噪算法,可以在保留人聲的同時,抑制其他的噪聲。同時,音頻超分算法可對演唱會中的人聲部分進行一定的頻帶拓展,使得人聲更加清晰。

除了社會價值,還有產業價值

正是通過這一系列修復工作,31年前的Beyond演唱會才得以超清重現。實際上在此之前,西瓜視頻於去年便聯合火山引擎發起了「經典中視頻4K修復計劃」,當時主要是針對經典動畫片的修復。

有研究數據顯示,一部90分鐘左右的影片,約有12萬—14萬幀畫面,過去的修復工作需要每幀畫面逐一完成。通常情況下,每人每天能夠修復6000—8000幀,片長大約4—5分鐘;遇到修復難度大的片子,每人每天只能修復幾百幀,片長大約20—30秒。

而通過數位技術的應用,視頻修復工作變得更加高效。火山引擎修復經典動畫片的數據顯示,算法目前已能夠直接消除95%以上的瑕疵,剩下的則要輔以人工標註,再調整算法做二次優化。

對火山引擎來說,修復經典,不僅是一種社會價值的體現,更是對自身技術能力的自證。

在字節跳動內部,抖音等平台每天都有大量的視頻投稿,這裡面也包括許多低畫質的內容,所以,火山引擎每天對內要做大量的視頻優化處理工作,演唱會的很多修復技術,便來自於此。

不僅如此,作為字節跳動旗下的To B品牌,火山引擎也在把這些成熟技術推向企業市場。今年2月份,火山引擎對外發布了視頻雲全新產品矩陣,包括視頻點播、直播、veImageX、實時音視頻等產品,同時還提供傳輸網絡、智能生產、智能處理等中台支撐服務。

其中,「智能處理」中便包含了畫質檢測、畫質增強、高清低碼、老片修復、視頻DNA等技術能力。

IDC今年發布的《視頻雲發展趨勢洞察》報告顯示,近幾年,視頻雲作為支撐ToC視頻產業的技術底座,得到了快速增長。而當前,視頻雲正在擺脫傳輸管道地位,體現出更豐富的內涵。

報告指出,從2020上半年開始,視頻雲解決方案增速已大幅領先基礎設施增速,在「傳統」對象存儲和CDN分發之外,全棧直播、點播、音視頻通訊、智能生產以及其他解決方案正在獲得客戶青睞。

而火山引擎也享受到了這一市場趨勢紅利,目前,其已服務包括三七互娛、凱叔講故事、華林證券、華數等在內的來自多個不同領域的企業客戶。

在IDC看來,視頻雲的發展才剛剛開始,未來隨著視頻在傳統行業的應用場景與範圍不斷拓展,中國視頻雲市場有非常廣闊的發展空間,下一次增長高潮已在醞釀之中。

更多內容請下載21財經APP

關鍵字: