近日，抖音与火山引擎超清修复了“Beyond1991生命接触演唱会精选”“别了家驹十五演唱会精选”两场演唱会。修复后的效果立竿见影，无论是在画面还是音质上都有了质的提升，让人眼前一亮，不少网友看后欢呼“爷青回”。这究竟是如何做到的，以后老旧音像资料都可一键翻新吗？
超清修复，几代人的青春记忆被唤醒
据了解，为了提升观看和听感体验，再现Beyond经典之作，火山引擎对其从画质和音质两个方面进行了修复。“我们的目标是从画面整体清晰度、人像五官复原度、色彩亮度、流畅度、美观度等方面对画质进行提升。”火山引擎相关负责人介绍。
修复后，人物面部的胡须、毛孔清晰可见，给观众带来更佳视觉感受。正如有网友观后感称，“超清修复后，看到了黄家驹细微的表情和眼中的光。”在画质上，视频分辨率从不足540p提升到接近4K水平，帧率从25fps提升到60fps。
在音质修复方面，火山引擎音频技术团队通过音频降噪、音频超分和响度算法，消除噪声提升音质，解决响度、噪声干扰、带宽不足等问题。修复后在保留音乐和人声的前提下，抑制了周围噪声，原始音频的高频部分还得到了拓展和增强。
实际上，超清修复不只是提升了音画清晰度，修复的还是影像背后的记忆，几代歌迷因为Beyond隔空产生的共鸣和火花。例如，这次参与画质修复技术团队都是90年后出生的，他们为此感到兴奋和骄傲。
北京大学法学院副教授江溯也是资深Beyond歌迷，他表示，Beyond的歌伴随自己走过漫长岁月——到城里读大学，考上研究生以及读博士、出国学习，最终成为法学学者，甚至记不清自己打开多少次这场熟悉的演唱会视频。
在7月3日的“Beyond超清修复演唱会官宣”直播中，无数网友在屏幕上打出，“看哭了。”“在漫长的黑夜，beyond无数次给我力量。”“当年陪我看DVD的朋友，你现在在哪里。”“80后报到、90后报到、00后报到……”这场直播最终以1.4亿人次观看的成绩落幕。
如何做到的，背后用了哪些“黑科技”？
一般来说，老旧音像作品画面模糊不清、受损严重；受限于原来的拍摄设备和环境，底噪较大，影片存在大量的过曝与死黑场景；上个时代的视频编码器压缩效率低，会导致压缩噪声和纹理丢失，等等。
所以说对这种老旧作品的修复，难度可想而知。那么火山引擎究竟怎样做到的呢？尤其市面上做老旧音像作品修复的企业也不少，火山引擎有什么不一样吗？一个显著区别是，一些企业普通的画质修复算法对人脸处理不够精细，可能是一个“模板”处理所有视角，而火山引擎自研了自适应人像增强算法。
据介绍，本次Beyond演唱会人脸有不同大小(近景/中景/远景)、不同姿态(侧脸/俯视/仰视)的场景，如何调节不同大小、姿态的人像修复效果而且跟背景不会造成明显差异，成了本次修复的一个难点。
“针对演唱会场景中多角度的人脸，包括正脸，侧脸，俯视，仰视，还有一些被乐器/话筒遮挡的人脸，火山引擎自研的自适应人像增强算法在各种极端场景下都有较好的修复效果，稳定性强。”火山引擎多媒体实验室研究员赵世杰表示。
赵世杰进一步表示，基于深度学习模型，自适应人像增强算法在消除人脸整体的模糊和压缩损伤的同时，进一步对人脸关键的五官重建，对眼睛、嘴巴、耳朵、皮肤甚至发丝都进行了细节重建和纹理添加，使得人脸清晰度更高更真实。
火山引擎音频技术团队研究员舒晓峰表示，火山引擎音频降噪算法针对音乐场景和人声场景实现了一个兼容的AI降噪算法，可以保留人说话/唱歌/音乐的同时，抑制其他的噪声。
除了算法上的优势，在应用场景上，火山引擎也具备得天独厚的条件。抖音、西瓜视频等业务每天都会收到用户海量的投稿，这里面既有 UGC，也有PUGC的，有专业的视频，也有业余的拍摄，质量参差不齐，这些投稿都会经过火山引擎的自动优化处理，对清晰度、色彩、瑕疵、失真等做自动的修复。“总结来说，我们拥有一个非常丰富的应用场景去优化迭代算法。”火山引擎相关负责人介绍。
AI修复，会成为老旧音像作品修复“救星”？
据介绍，本次抖音直播超清修复的Beyond演唱会中，还应用了火山引擎画质全链路端到端解决方案。该解决方案主要包括服务端分析系统、服务端视频处理系统，客户端解码后处理系统。
一个完整的视频消费链路包括了上传、转码、传输、消费等，火山引擎在其中的多个环节中对视频内容进行画质、码率、体验的优化。
以服务端视频处理系统为例，它可根据上一环节输出的最优策略进行处理，组合多种算法模块包括超分、降噪、HDR、编码前处理、采样等，该过程先获取视频画质的上限，然后从码率出发进行编码预处理。
值得注意的是，这样的技术除了应用在抖音中，也会对外开放。“修复经验以及相关技术能力可以便捷地应用到其他的场景或者行业中。”赵世杰指出，目前这些技术能力均已通过火山引擎视频云、音频技术产品开放给外部。
修复不仅仅应用在演唱会、短视频等领域，2021年10月，西瓜视频及火山引擎推出“经典视频4K修复计划”，计划通过技术手段，一年内修复百部经典动画片，目前已完成71部。
修复经典是传承，也是用数字技术最大化还原作品，带来视听新感受。“未来，我们会联合火山引擎修复更多经典影像，让经典焕发新生。”抖音相关负责人表示。
,
