专家提出一种方法可以有效鉴别DeepFakes“AI换脸术”
文章概要:
这篇论文提出了一种利用头部姿势估计作为特征来区分真实视频和 Deepfake 视频的方法。
作者通过分析视频中个体的头部姿势角度来发现 Deepfake 操纵引入的不一致性。
在实验中,使用了三种头部姿势估计方法,并使用了 KNN 和动态时间规整等技术进行实验验证,最终证明了这种方法在 Deepfake 检测方面的有效性。
虚拟伪造视频的出现引发了人们对视觉内容可信度的担忧。利用深度学习和面部标志的各种算法在解决这一挑战上已经取得了令人着迷的成果。检测伪造视频的主要挑战在于具有说服力的 Deepfake 技术可能引起的潜在危害,这种技术可以用于欺骗、证据篡改、侵犯隐私和传播错误信息。检测这些视频需要结合分析面部动作、纹理和时态一致性等技术,通常利用卷积神经网络(CNN)等机器学习方法。
论文地址:https://dl.acm.org/doi/pdf/10.1145/3612928
最近的研究聚焦于使用各种方法检测 Deepfake。有些将 Deepfake 视为异常,寻找深度、背景和局部 - 全局信息的不一致性。还有一些将 Deepfake 视为一种独特的模式,利用深度学习技术分析面部特征和颜色空间。这些努力有助于区分真实内容和 Deepfake 视频。
在这个背景下,最近发表了一篇新论文,提出了一种新的解决方案,涉及使用头部姿势估计(HPE)作为区分真实视频和 Deepfake 的唯一标识符。作者建议通过分析视频中个体的头部姿势来帮助区分真实内容和 Deepfake 内容。这种方法着眼于头部方向的角度,以便发现视频操作中引入的不一致性。该研究旨在评估使用各种方法和数据集的有效性,为改进 Deepfake 检测策略做出贡献。
所提出的方法的主要思想是将头部姿势估计作为检测 Deepfake 视频的特征之一。
头部姿势估计涉及确定图像或视频中人物的头部位置和方向。这些信息可用于识别 Deepfake 操作引入的差异,因为即使是头部对齐的微小变化也很难准确复制。该研究分析了三种 HPE 方法,并在流行的 FF Deepfake 数据集上进行了水平和垂直分析。目标是找到最有效的 Deepfake 检测方法。
作者进行了实验,利用头部姿势模式来检测 Deepfake 视频。他们使用了包括真实和操作视频的 “FaceForensics ” 数据集。他们采用 KNN 和动态时间规整(DTW)对齐序列,并利用深度学习模型(1D 卷积和 GRU)捕捉时间模式。这些方法旨在基于头部姿势将视频分类为真实或伪造。最佳结果来自于基于 HPE 的方法,使用 KNN-DTW 的 FSA-Net。该方法在多个最先进的方法上表现出色,显示出在数据集的不同子集之间的稳定性和可迁移性。研究表明,头部姿势模式对于 Deepfake 检测非常有效,特别是在像 FaceSwap 这样不太逼真的攻击中。
iQOO 11S发布:充电最快的骁龙8 Gen2旗舰 3799元起
快科技7月4日消息,iQOO11S正式发布。售价方面,iQOO11S12GB256GB售价3799元;16GB256GB售价4099元;15GB512GB售价4399元;16GB1TB售价4799元。对比iQOO11,iQOO11S升级为200W有线闪充,是迄今为止充电速度最快的骁龙8Gen2旗舰手机。站长网2023-07-05 09:17:200001华为回应P70延期发布:压根没公布过发布日期
据蓝鲸财经报道,近日,市场上有关华为P70系列手机延期发布的传闻引起了广泛关注。然而,华为内部知情人士在接受记者采访时却明确表示,公司从未对外公布过该系列的发布日期。站长网2024-03-08 15:53:590000字节与浙大联合推多模态大语言模型Vista-LLaMA 可解读视频内容
**划重点:**-💡Vista-LLaMA是一种专为视频内容理解而设计的多模态大语言模型,能够输出高质量视频描述。-🔬通过创新的视觉与语言token处理方式,Vista-LLaMA解决了在视频内容中出现“幻觉”现象的问题。-🚀改良的注意力机制和序列化视觉投影器提高了模型对视频内容的深度理解和时序逻辑把握。站长网2024-01-08 17:26:080008卖家误删游戏账号认证导致排名下跌 买家起诉获赔1万元
据江苏高院消息,去年3月,何某在某游戏代售平台上发布出售某游戏账号的信息。李某看中何某账号在区域内排名第5的优势,与何某沟通一番后双方以8万元成交。付款后,李某在何某的配合下将游戏账号换绑为自己的微信号。站长网2023-05-12 20:27:000000达摩院推出人工智能框架HQTrack 可实现视频高质量跟踪
中国大连理工大学和阿里巴巴集团DAMOAcademy提出的一个名为HQTrack的系统。该系统由视频多目标分割器(VMOS)和掩模优化器(MR)组成,旨在实现对视频中任何目标的高质量跟踪。项目地址:https://github.com/jiawen-zhu/HQTrack站长网2023-07-31 10:17:090000