2020 年 2 月 7 日-2 月 12 日，AAAI 2020 将于美国纽约举办。不久之前，大会官方公布了今年的论文收录信息：收到 8800 篇提交论文，评审了 7737 篇，接收 1591 篇，接收率 20.6%。本文介绍了爱奇艺与北航等机构合作的论文《Ultrafast Video Attention Prediction with Coupled Knowledge Distillation》。
本论文设计了一个超轻量级网络 UVA-Net，并提出了一种基于耦合知识蒸馏的网络训练方法，在视频注意力预测方向的性能可与 11 个最新模型相媲美，而其存储空间仅占用 0.68 MB，在 GPU，CPU 上的速度分别达到 10,106FPS，404FPS，比之前的模型提升了 206 倍。
由于传统的高精度视频显著区域检测模型往往对计算能力和存储能力有较高要求，处理速度较慢，造成了资源的浪费。因此，视频显著区域检测需要解决如下两个问题：1）如何降低模型的计算量和存储空间需求，提高处理效率？2）如何从视频中提取有效时空联合特征，避免准确率下降？
针对这些问题，作者提出了耦合知识蒸馏的轻量级视频显著区域检测方法 [1]。轻量级视频显著区域检测的难点在于模型泛化能力不足，时域空域线索结合难，影响方法的检测性能。为此，作者提出了一种轻量级的网络结构 UVA-Net，并利用耦合知识蒸馏的训练方法提高视频显著区域检测性能。
MobileNetV2 作为一种轻量级网络结构（如表 3（a）所示）在较大提高的网络的紧凑性的同时，损失了部分精度。作者在 MobileNetV2 的基础上提出了一种 CA-Res block 结构，具体如表 3（b）所示，利用这种网络结构训练的模型比之前的方法快 206 倍。
作者在 AVS1K 数据集上进行模型评测，具体结果如表 4 和表 5 所示。从表中我们可以看出 UVA-DVA-64 达到了和其他高性能模型相当的性能，但是模型只有 2.73M，速度达到了 404.3 FPS，而 UVA-DVA-32 性能虽略有下降，模型却只有 0.68M，速度达到了 10,106 FPS。
作者提出的基于耦合知识蒸馏的超高速视频显著区域检测算法与现有的国际高水平方法相比，计算精度与 11 种国际高水平方法相当，能够有效解决任务中模型泛化能力不足，时域空域线索结合难导致的问题，并具有良好的视频显著区域检测效果，且易于迁移到其它任务。
目前该技术已经应用到爱奇艺图片搜索，视频素材检索等方向，并对爱奇艺很多业务具有启发意义。
文献请引用：
[1]Fu, K., Shi, P., Song, Y., Ge, S., Lu, X. & Li, J. (2019). Ultrafast Video Attention Prediction with Coupled Knowledge Distillation. In AAAI, 2020.
本文为机器之心发布，转载请联系本公众号获得授权。
✄------------------------------------------------
加入机器之心（全职记者 / 实习生）：hr@jiqizhixin.com
投稿或寻求报道：content@jiqizhixin.com
广告 & 商务合作：bd@jiqizhixin.com
原标题：《AAAI 2020 | 速度提升200倍，爱奇艺&北航等提出基于耦合知识蒸馏的视频显著区域检测算法》
