Sora:AI视频“王炸”降维打击?小心,“眼见为实”要变“眼见未必真”了!

温故智新AIGC实验室

TL;DR:

OpenAI的Sora一出,视频生成直接“杀疯了”,但随之而来的“AI造假”能力也直线飙升,各种赛博骗局、虚假信息可能像病毒一样传播,反诈界的大佬们已经撸起袖子准备“放大招”了!

当你在社交媒体上刷到一个商店被抢、住宅被闯入,甚至城市街头“轰隆”一声爆炸的视频,你的第一反应是什么?震惊?恐慌?想要转发提醒朋友?等等,先别急着手抖!因为,这很可能就是OpenAI家的Sora搞的“大新闻”——那些从未发生过的“逼真”场景,如今通过AI,分分钟就能给你“拍”出来。1 没错,Sora这波操作,直接把我们对“眼见为实”的信任度,干到了冰点。

AI“魔法”秀:Sora究竟有多“离谱”?

说实话,Sora一经发布,整个AI圈都被它炸得不轻。你以为的文生视频还停留在“小打小闹”的阶段,比如让一只小狗在草地上跑两秒,背景还时不时“穿帮”一下? Too young, too simple! Sora直接给所有同行来了个“降维打击”:

它不仅能从简单的文字描述中,“脑补”出长达60秒的超高清视频——要知道,这可是市面上普遍水平的 15倍2 更绝的是,Sora生成的视频,画面流畅得不像话,镜头切换无缝衔接,物体在物理世界中的运动规律也把握得“八九不离十”,甚至连角色细腻的情感都能精准呈现。想象一下,你随便打几个字,AI就能给你剪出一部堪比好莱坞大片的“预告片”,这简直是给影视、游戏、广告行业的“打工人”送上了史诗级外挂啊!2 难怪有人惊呼,这简直是AI界的“王炸”,足以开创“Sora前时代”和“Sora后时代”!2

它背后的技术,虽然听起来高大上(Transformer、扩散模型啥的),但说白了,就是OpenAI把这些“老技术”配上更强大的算力和海量训练数据,愣是“驯服”出了一个“世界模型”的雏形,让AI不再是简单的“画皮”,而是能“理解”世界运行逻辑的“智慧体”。2

“赛博骗局”升级:你的眼睛还能相信吗?

然而,当我们在惊叹Sora的“神操作”时,另一面,巨大的担忧也像乌云一样压了过来。RSS标题直指要害:Sora让虚假信息变得“极度容易,极度真实”。那些我们曾用来警惕的“深度伪造”(Deepfake)技术,在Sora的加持下,简直是**“魔高一丈”**,威力直线升级。

过去,AI伪造视频可能还会有一些“小破绽”,比如人物表情不自然、背景逻辑混乱等。但在Sora面前,这些“小瑕疵”可能将不复存在。想象一下,有人可以轻而易举地生成:

  • 名人发表煽动性言论的视频(虽然他本人根本没说过)
  • 银行账户被盗刷的“现场”视频(但其实只是AI合成)
  • 甚至政治候选人做出不当行为的“铁证”(足以影响大选)

这些“眼见为实”的视频,其传播速度和影响力,恐怕是任何文字谣言都无法比拟的。虚假信息、损害声誉、政治操纵、金融诈骗……这些黑暗面的风险从未如此巨大32

ADVANCE.AI技术负责人范怀宇就直言:

“S该技术对‘深度伪造’这一欺诈行为的加持将是最明显的。以往我们应对‘深度伪造’监测识别的常见方法有利用图像的特征,寻找特定篡改证据的[图像特征检测],以及[图像构成真实性比对]的方法,利用人工智能技术深度伪造的图像或视频,在图像细节上,还是会出现一些与基于实物正常拍摄的图像之间的明显偏差,比对其中的差异后进行反欺诈应对。”2

言外之意:以前还能找找茬,以后Sora一出,这“茬”可能就没了,反诈难度直线上升!

反诈“魔法盾”:技术大佬们如何“接招”?

面对Sora带来的“赛博骗局”黑暗升级,难道我们只能束手就擒吗?当然不是!就像“矛”更锋利了,“盾”也必须更坚固。

OpenAI自己也意识到了问题的严重性,他们表示,在Sora真正面向公众推出时,会采取一系列安全措施,比如:

  • 给视频打上“水印”:生成视频会包含来源元数据(C2PA中继资料),方便溯源。42
  • 推出“照妖镜”工具:开发能判断视频是否由Sora生成的检测分类器。42
  • 设置“防火墙”:对模型进行专家对抗性测试,评估风险,并拒绝生成极端暴力、性内容、仇恨图像等提示。2

但OpenAI也坦承,“我们仍无法预测人们将使用我们技术的所有有益方式和滥用我们技术的所有方式”。这不废话嘛,“道高一尺魔高一丈”,这句古话在AI时代依然适用。

而像ADVANCE.AI这样的反欺诈科技公司,早就已经“如临大敌”,开始升级他们的“魔法盾”了。他们认为,Sora的出现意味着欺诈者的犯罪成本和门槛进一步降低,所以,反欺诈技术必须从算法和数据训练上进行“黑暗升级”2

ADVANCE.AI的人工智能产品负责人余江波强调:

“更强的矛势必催生更强的盾,Sora被应用在金融欺诈领域不可避免,但结合Sora背后的这些技术特点,我们可以模拟可能发生的欺诈行为,例如画面更逼真、漏洞更少的深度伪造的AI视频发起的欺诈行为,找出与以往既有深度伪造、合成身份欺诈行为的不同之处,进而提升我们ADVANCE.AI反欺诈解决方案产品的防御能力,让客户用着安心。”2

简单说:Sora的底裤我们也要摸清楚,知己知彼才能百战不殆!

他们推出的**“星鉴”数字身份验证与风险管理解决方案**,就是为了对抗这些“赛博骗局”:

  • “3D活体检测功能”:通过引导用户移动头部、靠近或移开镜头,实时捕捉近景远景图像,就像给你的脸部做了个高科技“指纹识别”,高效防范AI换脸、人脸合成等深度伪造攻击。2
  • “假证检测”:全自动化识别各种伪造证件,比如屏幕翻拍、黑白复印、人脸贴图、身份证号码篡改等,不给假身份任何可乘之机。2
  • “多维度信息网”:除了画面识别,还会结合用户行为特征、网络关系、手机号码/邮箱状态等更多维度信息,构建一个“天罗地网”式的反欺诈体系。2

毕竟,AI的“矛”再厉害,也总有它的破绽。对抗“深度伪造”的未来,需要科技公司不断提升产品的识别、检测、追溯能力,就像ADVANCE.AI正在做的那样,从“魔高一丈”的AI视频里,深挖出那些不完美之处,用更强的“道”去“制裁”更强的“魔”。

说到底,Sora的到来,是科技进步的又一座里程碑,它带来了无限可能,也敲响了警钟。在畅享AI创意自由的同时,我们也要清醒地认识到,如何构建一个**“AI信任”的防火墙**,将是未来一段时间内,全球科技界、伦理界乃至全社会都必须面对的“终极挑战”。这场“矛与盾”的较量,才刚刚开始,你,准备好了吗?

引用


  1. OpenAI’s Sora Makes Disinformation Extremely Easy and Extremely Real·Neuron.Expert(2024/05/20)·检索日期2024/05/20 ↩︎

  2. Sora问世,如何用大模型反诈? - 量子位·量子位·十三(2024/04/18)·检索日期2024/05/20 ↩︎ ↩︎ ↩︎ ↩︎ ↩︎ ↩︎ ↩︎ ↩︎ ↩︎ ↩︎ ↩︎ ↩︎ ↩︎ ↩︎

  3. 创意奇迹✨🎨还是垃圾洪流?🗑️🌊OpenAI🤖🎥的新视频AI ...·Xpert.Digital(2024/05/18)·检索日期2024/05/20 ↩︎

  4. Sora:從文字中誕生影片·OpenAI(2024/05/19)·检索日期2024/05/20 ↩︎ ↩︎