典型文献
基于多级时空域3D卷积的换脸视频检测方法
文献摘要:
近年来,视频换脸技术发展迅速.该技术可被用于伪造视频来影响政治行动和获得不当利益,从而给社会带来严重危害,目前已经引起了各国政府和舆论的广泛关注.本文通过分析现有的主流视频换脸生成技术和检测技术,指出当前主流的生成方法在时域和空域中均具有伪造痕迹和生成损失.而当前基于神经网络检测合成人脸视频的算法大部分方法只考虑了空域的单幅图像特征,并且在实际检测中有明显的过拟合问题.针对目前检测方法的不足,本文提出一种高效的基于时空域结合的检测算法.该方法同时对视频换脸生成结果在空域与时域中的伪造痕迹进行捕捉,其中,针对单帧的空域特征设计了全卷积网络模块,该模块采用3D卷积结构,能够精确地提取视频帧阵列中每帧的伪造痕迹;针对帧阵列的时域特征设计了卷积长短时记忆网络模块,该模块能够检测伪造视频帧之间的时序伪造痕迹;最后,根据特征分类设计特征网络金字塔网络结构,该结构能够融合不同尺寸的时空域特征,通过多尺度融合来提高分类效果,并减少过拟合现象.与现有方法相比,该方法在训练中的收敛效果和分类效果方面有明显优势.除此之外,我们在保证检测准确率的前提下采用较少的参数,相比现有结构而言训练效率更高.
文献关键词:
视频换脸;神经网络检测;卷积长短时记忆网络;特征网络金字塔
中图分类号:
作者姓名:
包晗;符皓程;曹纭;赵险峰;汤朋
作者机构:
中国科学院信息工程研究所 信息安全国家重点实验室 北京 中国100093;中国科学院大学 网络空间安全学院 北京 中国100093
文献出处:
引用格式:
[1]包晗;符皓程;曹纭;赵险峰;汤朋-.基于多级时空域3D卷积的换脸视频检测方法)[J].信息安全学报,2022(05):29-38
A类:
视频换脸,特征网络金字塔
B类:
时空域,换脸视频,视频检测,伪造,严重危害,生成技术,生成方法,痕迹,神经网络检测,人脸视频,单幅图像,图像特征,过拟合,检测算法,对视,生成结果,单帧,全卷积网络,视频帧,时域特征,卷积长短时记忆网络,特征分类,设计特征,金字塔网络,不同尺寸,多尺度融合,分类效果,收敛效果,除此之外,检测准确率,训练效率
AB值:
0.286514
相似文献
机标中图分类号,由域田数据科技根据网络公开资料自动分析生成,仅供学习研究参考。