4K版葫芦兄弟，西瓜视频计划修复百部动画片，背后藏着这些AI算法(4)

智能处理技术的一大子功能即是老片修复。在 4K 修复过程中，火山引擎从清晰度、流畅度、色彩和瑕疵四个方面解决老片的清晰度低、流畅度低、色彩失真和瑕疵多问题，其中多个 AI 算法的使能是关键，包括如下：
智能超分
智能插帧
色彩增强
消除瑕疵（视频降噪和划痕修复）
锯齿修复
在这几个 AI 算法的加持下，火山引擎针对 4K 极致画质体验场景（如西瓜影院模式），提供了极致画质修复方案，提升源视频的分辨率、帧率和色域，进行高质量智能转码，达到极致的播放视频画质。

火山引擎智能处理的完整流程。
智能超分
作为一项非常重要的视频处理技术，超分辨率通过硬件或软件的方法提高原有图像的分辨率，目的是根据一系列低分辨率的图像重建一幅高分辨率的图像。基于深度学习的超分辨率算法已经是近年来研究的热点，主流的方法一般分为单帧超分和多帧超分。
单帧超分即输入一张图片，输出其高分辨率图片。单帧超分辨率典型结构有预定义上采样（predefined upsampling）、单一上采样（single upsampling）等；多帧超分则考虑视频前后关系，重建更多细节。但这些超分辨率方法存在一些瓶颈，当上采率比较高时，例如 16 倍，很多算法不能很好地重构出对应的高清图像。
火山引擎的智能超分算法基于深度学习方法，根据已有的图像、视频信息重构出缺失的细节。特别对于视频任务，使用前后帧信息并对其进行时域建模恢复出额外的细节。在老片修复任务中，针对画面普遍存在的清晰度差、模糊和分辨率低等问题，智能超分可以显著提升清晰度和分辨率。相较于其他超分辨率算法，智能超分算法具有两大优势。
一方面，针对老片场景的模糊退化专门进行建模，从而优化清晰度效果。效果是这样的，720P 的源动画经过超分辨率重建和去模糊后，达到了 4K 分辨率的超高画质。