先说个结论,FILM 这款模型,在帧间插值这个领域确实有点东西,尤其是面对那些镜头快速移动、场景大幅度变化的素材时。
技术岗的朋友们肯定不陌生,视频编辑或者特效制作里,经常要处理大动态场景的帧率提升或慢动作生成。这时候普通插值算法往往撑不住,容易出现形变、鬼影。而 FILM 的厉害之处在于,它在保持高帧率平滑度的同时,对复杂运动细节的还原做得相当到位。

重点聊聊它的几个核心设计。它用的是统一的单网络方法,这意味着整个插值流程都在一个框架里完成,不需要额外设载好几个预训练模型来分别处理不同模块,工程实现上非常干净。关键的挑战在于——大场景动作的插值,传统的做法往往依赖复杂的预处理或后处理,但 FILM 通过一个精心设计的多尺度特征提取器,从粗粒度到细粒度逐层捕捉运动信息,这保证了即使画面中有大幅度位移或遮挡,也能生成连贯的中间帧。
另外,它的训练方式也很有意思——采用帧三元组结构。简单来说,就是让模型同时观察前后两帧以及中间的过渡目标帧,从而学会预测“中间发生了什么”。这种方法的好处是,不需要依赖额外的光流计算网络,降低了复杂度,也避免了误差累积。
