4K版葫芦兄弟，西瓜视频计划修复百部动画片，背后藏着这些AI算法(5)

另一方面，对内容进行自适应处理，根据不同区域分片处理，保持原有画风。我们以动画片《葫芦兄弟》为例，该片为水墨和剪纸的组合。在修复时，既要保证人物锐利，又要兼顾水墨背景的艺术效果。这对技术能力要求非常高，需要机器能够准确地识别好前景和背景。
从如下动效图来看，修复后（右边）的水墨画区域保持了朦胧感，剪纸区域提升了清晰度，彰显了智能超分的强大超分处理能力：

智能插帧
视频帧数是影响观影体验的重要因素之一，通常来说，单位时间内人眼看到的连续帧越多，人们对于影片会产生更真实更自然的主观感受。也就是，帧数越大，视频就越流畅。插帧技术可以实现低帧率视频向高帧率视频的转换。
国内外也出现了很多插帧技术，如基于 SVP（Smooth Video Project）的插帧渲染可以将 24 帧 / 秒的视频转化为 48 或 60 帧 / 秒、英伟达的神经网络脑补大法 Super SloMo 将帧率为 30 帧的视频补到 60 帧、240 帧甚至更高、上海交大开源的插帧算法 DAIN 更是可以将 30 帧的视频插帧到 480 帧。
在老片修复中，老动画片受限于制作成本，绘画帧数较少，一般为 15 帧以下，导致画面流畅度差，有卡顿感，更需要插帧算法的参与。
因此，火山引擎采用的智能插帧算法通过分析前后帧的运动和内容，对中间帧进行生成，将原先不足 15 的帧率，提升至 60 以上，大幅提升流畅度。此外，由于动画纹理较少，常规倍帧方案难以判断前后帧对应的运动块，火山引擎使用块光流进行优化，实现了更精准的插帧结果。