哪吒、葫芦娃、黑猫警长,一个个经典形象完成4K修复后,重回人们面前。
10月20日,西瓜视频“经典中视频4K修复”发布会在京举办,《葫芦兄弟》等六部动画4K版同步上线,修复工作由火山引擎提供技术支持。
据悉,火山引擎是字节跳动旗下的技术服务平台。其修复老片采用增强视频画质的多媒体技术,算法经过抖音、西瓜视频等业务大规模验证和持续迭代,并已向企业客户开放服务。
每天都在修“老片”
火山引擎多媒体实验室研究员赵世杰介绍,受到拍摄条件和胶片保存、使用过程中的损伤等因素影响,老片普遍存在不同程度的画质问题,主要包括清晰度低、流畅度低、色彩失真、有瑕疵。
这些画质问题同样影响有着海量投稿的视频平台,主要来自低配机型拍摄的视频素材。
“为了提升用户体验,抖音和西瓜视频需要对低画质投稿做优化,其中很多技术恰好能用在经典老片修复中。”赵世杰说。
基于在抖音等业务上的技术能力积累,火山引擎于今年七月推出“智能处理”工具包,通过超分辨率、智能插帧、色彩增强、降噪等算法实现增强视频画质的效果。
图:火山引擎“智能处理”技术流程图
赵世杰认为,深度学习等AI技术的兴起,大幅提升了老片修复的质量和效率:人工做不到的一些修复效果,AI可以做到,例如用超分辨率和智能插帧提升数字化影片的清晰度、流畅度;人工处理慢的一些修复过程,例如消除画面划痕、噪点等瑕疵,专业师傅每天只能修复一两百帧,AI算法结合强大的算力可以加速数万倍。
西瓜视频创作平台最新上线的老片修复工具,就是由火山引擎“智能处理技术”提供了一部分基础功能。用户可以免费体验老片修复,为自己珍藏的视频作品“旧貌换新颜”。
花大力气还原艺术本色
尽管有AI技术的加持,修复经典老片仍是一项繁重且艰难的任务,最大的难题是保留艺术风格和美感。
以《葫芦兄弟》为例,该片是水墨和剪纸的组合,修复工作一方面要提升前景的清晰度,另一方面又要兼顾水墨的艺术效果,让山水保持朦胧的艺术感。
图:修复经典老片需要保持艺术风格
赵世杰坦言,修复《葫芦兄弟》时多次与制片方讨论方案,经过反复测试和调优才达到理想效果。
为了防止“误伤”艺术效果,消除瑕疵的算法通常不会设置很高的强度,因此会漏掉一部分瑕疵,由人工辅助标注。对损伤严重的老片来说,彻底消除瑕疵需要投入大量人力。
火山引擎修复数据显示,算法能够直接消除95%以上的瑕疵,剩下的要辅以人工标注,再调整算法做二次优化。
在《葫芦兄弟》消除瑕疵的过程中,设计师们看了20万帧的画面。
西瓜视频总裁任利锋对此表示,经典作品凝结了老艺术家的智慧与精神,值得投入大力气做好修复。
未来一年,再修百部经典中视频
据全球130余间电影资料或收藏保护机构的数据统计,自电影诞生以来,目前保存下来的拷贝仅为总数的10%左右。
文字作品历经千百年永不褪色,经典老片却受困于画质问题,难以满足人们如今的观影体验。国内多家视频平台和专业人员因此发起修复行动,让技术在传承影视艺术中充分发挥价值。
此次西瓜视频将修复聚焦在中视频内容,动画片的时长大多在30分钟以内,就是最典型的中视频形态。
发布会上,西瓜视频和火山引擎联合央视动漫、上海美影厂,宣布未来一年再修一百部经典中视频,同时也欢迎其他版权方加入修复计划。对于有史料价值的老片,火山引擎承诺将免费提供专业精修的技术服务。
本文源自金融界网
,