火山发动机超清修复Beyond古典音乐会,技术能力对外开放—量子位,

7月3日晚,震音与旗下厂商“环球音乐”携手,现场直播经过火山引擎超清修复的“Beyond”Live1991生命接触演唱会和纪念演唱会精选内容,吸引了逾1.4亿人次观众

Beyond是1983年成立的摇滚乐队,随着粤语音乐的兴起,Beyond乐队的名字成为了一个时代文化的标志。《BeyondLive1991生命接触》是Beyond首次在剧场举办的演唱会,宝丽金之后发售的专辑在90年代几乎没有被要求。在接下来的31年里,这场音乐会成为了几代歌迷的音乐启蒙和青春记忆。

受当时摄影器材、存储媒体和录音设备技术的限制,演唱会主乐队和网上播放的各版本音视频质量不佳。为了提高视听和听觉体验,再现《Beyond》这部名作,火山引擎从画质和音质两方面进行了修复。

据火山发动机多媒体实验室介绍,早期软硬件设备落后,在电影制作、压缩、传输等过程中存在画面模糊、纹理丢失、噪声瑕疵等问题。在提高画质的同时尽可能多地恢复细节,优化颜色留下怀旧感,调节不同大小、姿态的人物形象修复效果是此次修复的难点。

“我们的目标是从画面整体清晰度、人像五官复原度、色亮度、平滑度、美观度等方面提升画质。”在画质上,本次修复通过清晰度增强和瑕疵修复、区域不同色亮度增强等算法处理早期软件硬件设备落后引起的问题。视频分辨率从低于540p接近4K级,帧速率从25fps上升到60fps。通过人像增强算法进行修复,黄家驹脸部眼线、毛孔等细节清晰可见

此外,火山发动机多媒体实验室还对自适应人像增强算法进行了自我研究,针对面部压缩损伤、模糊、低分辨率等问题,进行了修复增强。该技术基于深入学习,在消除面部整体模糊和压缩损伤的同时,更详细地重建面部的重要五感。修复后,人物脸上的胡须、毛孔清晰可见,为观众带来了更好的视觉感受。

在音质修复方面,火山发动机音频技术团队通过音频降噪、音频过分化和响度算法,去除噪声提高音质,解决了响度、噪声干扰、带宽不足等问题。

与传统的降噪方案不同,本次降噪算法针对音乐场景和人声场景,实现了一种兼容的AI降噪算法,在保留音乐和人声的情况下,抑制周围噪声。音频过分化算法对演唱会中人声部分进行频带扩展,丰富高频信息,使人声更加清晰。从频谱图中可以看出,超分割模块的处理使原始音频的高频部分得到了扩展和增强。

通过音频过分割算法的处理,对大于原始音频12kHz的高频信息进行了一定程度的补充修复

由于演唱会的拾取情况不同,演唱会上演唱的声音有时比乐器音和环境音小得多。火山引擎音频技术团队利用响度算法首先单独提取歌曲部分,然后调整歌曲部分的响度,最后混合,使整个人声更加舒适。

据了解,音乐会的这些修复能力都是通过火山引擎智能处理的,音频技术产品对外提供服务。此外,火山引擎还公开了画质全链路端到端解决方案,涵盖上传、转码、传输、消费等环节,实现了影像内容画质、码率、体验等方面的全方位优化。

数字化技术成为驱动文化传承的力量。据相关报道,2021年10月,西瓜视频和火山引擎发布了《经典视频4K修复计划》,通过技术手段,累计修复71部经典视频,修复后内容可在西瓜视频、鲜时间TV免费观看。火山引擎负责人表示,今后还会利用更多先进技术修复经典影像,让经典重演。

返回列表
上一篇:
下一篇:

文章评论