“经典香港电影修复计划”:火山引擎用视觉大模型修复100部老港片

《武状元苏乞儿》、《A计划》、《蜀山·新蜀山剑侠》……这些脍炙人口的经典老港片，将在4K精修后，重新出现在世人面前。8月16日，抖音、火山引擎、中国电影资料馆共同发布“经典香港电影修复计划”，将对多达100部香港经典老电影进行4K修复，还原老港片的绝代风华。火山引擎为该计划提供技术支持，并携手中国电影资料馆进行“AI+人工”的精细化修复。

据了解，这也是火山引擎首次将视觉大模型应用于老片修复场景，借助其强大的生成能力和丰富的先验知识，实现修复效果在清晰度、色彩、流畅度和瑕疵消除等方面的全方位提升。

公开资料显示，电影修复工艺繁杂琐碎，一位经验丰富的修复师需要1个月的时间，才可以修复完成一部影片。直到近些年，随着“深度学习”等AI技术的出现，大幅提升老片修复的质量和效率才成为可能。

“老片修复这件事情，其实我们每天都在做。”火山引擎视频云技术架构总监王悦表示，老片中常见的清晰度低、流畅度低、色彩失真、有瑕疵等画质问题，在抖音的海量投稿里也广泛存在。通过服务抖音，火山引擎在老片修复方面已经形成了一套较为完整的智能处理技术方案，曾携手西瓜视频和抖音，完成100部国产经典动画和Beyond经典演唱会的4K修复。

新兴的大模型技术也被首次运用到老片修复中。王悦介绍，一方面，大模型生成能力强，修复效果优于之前的算法，画面细节更自然；另一方面，大模型具有非常强的信息结构化能力，在学习了海量数据后，可以在其中提炼出大量的知识并“存储”在模型参数之中，其生成空间更丰富，能够应对更多的修复场景。

“打个比方，在‘看’过海量狗狗的照片后，大模型能学习并记住狗的样子，可以更生动形象地‘画’出一只狗。”王悦说。

但大模型强大的生成能力也是一把双刃剑，具体表现为在一些特定场景下并不稳定，容易生成伪影或者虚假纹理等；以Stable Diffusion为代表的视觉大模型，本身大多是基于图片或者单帧的算法，在视频这种多帧序列的场景下，也会存在效果和稳定性的问题。

因此，针对老旧电影修复的特殊场景，火山引擎多媒体实验室对视觉大模型做了三个层面的算法优化：在图像生成方面，通过控制模型的边界条件、强化高质量生成空间等手段，显著提升大模型的图像输出质量；在视频场景里，通过采用设计时域的自编码器、光流特征对齐、时域条件约束等技术手段，让大模型在修复的过程中可以使用前后帧的信息，更好地处理视频任务；同时，火山引擎还携手Intel在算法和工程上进行了多项优化，能显著提升大模型在4K场景下的处理效率并兼顾算力成本。

《武状元苏乞儿》（1992年）修复前 vs 修复后

据了解，抖音副总裁陈都烨介绍，未来一年，《喋血双雄》、《阿郎的故事》等100部香港电影的4K修复版，包括徐克、成龙、关锦鹏、周星驰等多位导演的作品，也将陆续在抖音、西瓜视频上线。#百部经典港片将被4K修复##用大模型修老电影有多清晰#