7月4日消息,昨日晚間,在火山引擎技術支持下,抖音攜手環(huán)球音樂旗下廠牌寶麗金,超清修
復“Beyond Live 1991生命接觸演唱會”及紀念音樂會精選內容被超清修復并重映。直播在
抖音、西瓜視頻、今日頭條、鮮時光TV同步進行,當晚累計觀看人次超1.4億。
火山引擎多媒體實驗室介紹,早期軟硬件設備落后,導致影片在制作、壓縮、傳輸等過程中存
在畫面模糊、紋理丟失和噪聲瑕疵等問題。如何處理成因復雜的質量退化同時恢復盡可能多的
細節(jié),修復老舊視頻的褪色并保留復古感,以及調節(jié)不同大小、姿態(tài)人像的修復效果,是本次
修復的難點。
“我們的目標是從畫面整體清晰度、人像五官復原度、色彩亮度、流暢度、美觀度等方面對畫
質進行提升。”畫質上,本次修復通過清晰度增強和瑕疵修復、分區(qū)域色彩亮度增強等算法,
處理早期軟硬件設備落后導致的問題。視頻分辨率從不足540p提升到接近4K水平,幀率從25f
ps提升到60fps。
此外,火山引擎多媒體實驗室還自研自適應人像增強算法,針對人臉壓縮損傷、模糊、低分辨
率等問題,進行修復增強。該技術基于深度學習,在消除人臉整體的模糊和壓縮損傷的同時,
進一步對人臉關鍵的五官進行細節(jié)重建。修復后,人物面部的胡須、毛孔清晰可見。
在音質修復方面,火山引擎音頻技術團隊通過音頻降噪、音頻超分和響度算法,消除噪聲提升
音質,解決響度、噪聲干擾、帶寬不足等問題。
與傳統(tǒng)降噪方案不同,本次降噪算法針對音樂場景和人聲場景,實現了兼容AI降噪算法,在保
留音樂和人聲的前提下,抑制周圍噪聲。音頻超分算法則對演唱會中的人聲部分進行頻帶拓展
,豐富高頻信息,使人聲更加清晰。
演唱會的拾音情況不同,會導致唱歌的聲音有時候相對樂器聲和環(huán)境音過小,火山引擎音頻技
術團隊利用響度算法首先單獨提取唱歌部分,再調整唱歌部分的響度,最后混合,使得整體的
人聲更加舒適。
據了解,2021年10月,西瓜視頻及火山引擎推出“經典視頻4K修復計劃”,通過技術手段,
一年內修復百部經典動畫片,目前已完成71部。同時,對擁有珍貴歷史影像的版權方,西瓜視
頻還開放免費修復合作。
抖音相關負責人表示,修復經典,是傳承,也是用數字技術最大化還原作品,帶來視聽新感受
。“未來,我們會聯合火山引擎超清修復更多經典影像,讓經典煥發(fā)新生。”