关闭广告

AI信任危机加剧:Sora视频“以假乱真”,国内灰产3元“洗白”水印

蓝鲸新闻18人阅读


图片来源:视觉中国

蓝鲸新闻10月20日讯(记者 朱俊熹)近半个月以来,你可能常在各大社交媒体的视频流中刷到这样的画面:路人在街头采访中被问及知道自己是AI生成的吗、交警追逐拦下驾驶车辆的猫猫狗狗、现身中国不同高铁站的OpenAI CEO Sam Altman……

只不过这些都不是真实发生的,而是由OpenAI Sora 2模型生成的AI视频。这些看似逼真却脱离现实的视频内容,推动着Sora App在过去十多天内稳居免费应用榜单首位,不到五天下载量便突破百万次,增长速度甚至超过了ChatGPT。即便竞争对手谷歌于上周推出了新的视频模型Veo 3.1,其相关AI应用Gemini目前仍排在Sora、ChatGPT之后。

但另一方面,新的Sora 2模型也为OpenAI招致了大量有关版权与安全的批评。当地时间10月17日,OpenAI宣布暂停在Sora平台上生成涉及美国黑人民权领袖马丁·路德·金形象的内容,同时强化针对历史人物的安全防护机制。此前,通过Sora生成的马丁·路德·金发表粗俗言论或偷窃商品等AI视频在网上广泛传播,其家人对此表示强烈不满。

无论人们是否欢迎,AI已经在改变社交媒体。OpenAI更是凭借其强大的影响力,进一步推动了AI视频的大众化。OpenAI曾将Sora 2形容为视频领域的"GPT-3.5时刻"。三年前,正是基于GPT-3.5的ChatGPT首次面世,掀起了新一轮AI浪潮。那么,剩下的问题是:人类做好准备迎接Sora 2时代了吗?

眼见不再为实,AI视频进入"社交时代"

AI产品经理Keith是第一批试用Sora App的用户,但没过几天,他就对这款新应用失去了兴趣,几乎很少再打开。最令他感到"生理不适"的,是那些主打"真实向"的AI视频。画面中的街景和人物几乎与社交媒体上的日常Vlog无异,让人很难分辨出哪些是实拍的、哪些是AI生成的。

"人类的生存本能之一,是要分辨信息的真假,但这些AI视频在疯狂挑战这个本能。"Keith对蓝鲸科技记者表示。"在Sora里看到的所有东西都是假的,会让人一直很疲惫,就像被丢进一个《楚门的世界》里。"


图片来源:Sora截图

AI安全公司瑞莱智慧RealAI联合创始人、算法科学家萧子豪告诉蓝鲸科技,人类千百年来的传统认知是"耳听为虚,眼见为实",即"二手信息真伪难辨,一手信息才真实"。而如今,这一认知在AI时代受到了极大的挑战甚至颠覆。随着AI技术的持续迭代,这类内容变得越来越逼真和易于使用,人类的肉眼和耳朵已无法辨别一手信息的真伪。

就Sora 2模型而言,OpenAI称其在物理准确性、逼真度和可控性方面均超越前代模型。例如当运动员投篮不中时,上一代视频模型为执行指令可能会扭曲物体或现实,导致球突然传送到篮筐。而在Sora 2中,球会从篮板反弹,其遵循物理定律的能力得到显著优化。此外,Sora 2还是继谷歌Veo 3后的又一款音视频生成模型,支持对话与音效同步。

在前述AI产品经理Keith看来,除了生成时长和视频效果等方面的优势,Sora 2的火爆还与产品层面的设计相关。初期该模型采取免费开放的模式,并提供充裕的初始配额供用户自由探索其功能。所有用户都可以在App和网页版上生成最长15秒的视频,专业版付费用户则可生成最长25秒的视频。其次,Sora App还内置了类似抖音等短视频平台的信息流,会结合用户的Sora动态、ChatGPT数据等信息,提供个性化的推荐内容。


图片来源:Sora截图

Sora并非第一款采用信息流模式的AI视频类应用。9月底,Meta同样在其AI应用中推出视频信息流功能Vibes。用户在浏览时会看到不同创作者生成的AI视频,随着时间推移,信息流会逐渐根据用户兴趣进行个性化推荐。成功打造出抖音的字节跳动也在自家AI内容平台即梦中引入了视频流机制,用户在刷视频时还可以进行评论、点赞等互动。


图片来源:即梦AI截图

在这些想成为"AI版抖音"的应用中,Sora显然取得的反响是最大的。其中一个原因在于它推出的客串(cameos)功能,支持用户在生成的视频片段中放入自己、朋友或任意动物的形象。同时,用户还可以和Sora应用中的好友一起创建、编辑和分享视频内容。OpenAI称,在所有主要平台都在逐渐淡化社交图谱的时期,cameos将强化社区感。

"Sora用关系替代了质量门槛,让内容更容易被消费。"AI创业者陈锴杰在社交平台上表示,"当内容发生在朋友之间时,质量不再是唯一标准。哪怕生成结果并不完美,朋友间的互动本身就足够有趣。"

也有大模型从业者指出,随着AI的发展,内容的创作与分发必然会发生本质改变,而Sora已经迈出了第一步。它提出的一个大胆假设是,只要门槛做到足够低,每个人都可以成为创作者,而内容的消费者也可以是所有人。

"以假乱真"后,Sora的溯源攻防战

当用户第一次登入Sora App时,会看到一句提示语:您即将踏入由AI生成内容构建的创意世界。Sora会提醒用户,尽管一些视频中出现的是认识的人,但其行为和事件并非真实的。在Sora App上,人们尚且能够意识到,一切都是AI生成的。但随着这些内容从Sora流向其他社交平台,它们便逐渐与真实的视频混杂在一起,使人真假难辨。


图片来源:Sora截图

对普通用户来说,辨别AI视频最简单的方法,就是查看视频是否带有Sora、即梦AI等水印标识。OpenAI在推出Sora 2时专门介绍称,使用Sora生成的每一段视频都带有可见和不可见的溯源信号。除了明显的水印外,生成的AI视频还内嵌了行业标准签名C2PA元数据。此外,OpenAI也开发了内部反向图片和音频搜索工具,能够高精度地溯源来自Sora的视频。

然而,互联网上已开始兴起各种去除Sora水印的手段。蓝鲸科技记者查询发现,只需将Sora生成的AI视频上传到某些在线工具或平台,不到一分钟即可去除Sora的三处水印。在国内二手交易平台上,也有商家提供"人工代处理水印"服务,15秒左右的视频报价约3-4元。


图片来源:二手交易平台截图

瑞莱智慧RealAI联合创始人、算法科学家萧子豪表示,这些去除手段主要针对显式水印。一些用户希望将Sora 2生成的图像或视频作为短视频创作素材,而显式水印会影响传播效果,因此有去除水印的急切需求。不过他也强调,去除显式水印后仍有几率通过其他方式进行溯源,例如基于模型指纹的溯源,即模型在生成内容过程中留下的"隐性特征"。

中科睿鉴数字合成内容检测专家葛星宇向蓝鲸科技介绍称,OpenAI所采取的"内嵌元数据+可见标识+后端检索"的溯源组合是一种"主动防护"框架,学术界与产业正积极推动此类方案。在很多情形下,后端的指纹、反向搜索会比元数据更抗破坏。但若内容经过重合成、翻译渲染或极端变换等大幅改动,匹配可信度也会下降。

"AI视频的侵权或违法问题,涉及复杂的法律责任链条。责任分配并非一刀切,一般可以包括内容生成者、平台运营者、模型开发者。"葛星宇强调。其中,模型开发者的责任认定最具争议,通常认为该主体不为工具的滥用负责,除非存在重大过失。溯源工作通常由受害者、执法机关发起,并要求平台和开发者提供技术协助。

以中国对AI生成合成内容的治理为例,国家网信办等四部门联合发布的《人工智能生成合成内容标识办法》,今年9月1日起正式施行。"标识办法"明确,服务提供者有义务确保其生成的内容符合标识要求,并在生成内容时主动添加标识。平台则要在内容上架或上线时进行审核,对未标识或疑似生成内容添加风险提示。

面对市场的快速反馈,Sora 2上线几天后,OpenAI CEO Sam Altman在个人博客中表示,这让他想起了ChatGPT早期的日子。他还预告称,Sora产品将会有非常高的变化频率。"我们会做出一些不错的决定,也会有一些失误,但我们会快速收集反馈并修正失误。"

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

博主成功拆解苹果 iPhone Air,刮去背板涂层打造“透明版”机型

IT之家 浏览 19

特斯拉车顶维权女车主被判道歉 律师提醒:维权要遵守法律

汽车专业网 浏览 2510

黄宗泽恭喜陈伟霆当爸,怼记者别太八卦

扒虾侃娱 浏览 24

宋伊人新剧被传谣,是要逼人“剖腹取粉”吗?

麻辣婊 浏览 34

今年秋冬最流行的外套竟然是它?谁穿谁时髦!

LinkFashion 浏览 32

马克龙呼吁乌克兰盟友"不做懦夫" 被德国防长批评

环球网资讯 浏览 2705

中方连对美"重拳出击" 特朗普这才看清楚中国留了一手

空天力量 浏览 41

李昀锐孟子义被曝恋情,却双双否认

霁月文娱阁 浏览 36

定位大型旗舰SUV 零跑D19预告图发布

车质网 浏览 31

"商务部公告附件首次改为wps格式"不实 至少5年前已用

极目新闻 浏览 47

全球造船业变革:亚洲崛起,美国地位下滑

边际财经实验室 浏览 2564

警方通报小米成都车祸: 驾驶员涉嫌酒后驾驶

网易汽车 浏览 32

宁波网球公开赛:袁悦2-0战胜王欣瑜,晋级女单16强

懂球帝 浏览 34

韩国称朝鲜在军事分界线上修建隔离墙

金羊网 浏览 2662

大模型时代,广告投放从「玄学」变「科学」

36氪 浏览 25752

涉及核武触碰反击条款 俄战略预警雷达遭袭引多方焦虑

环球网资讯 浏览 2572

未能破门!维尼修斯赛后向球迷挥手致意

直播吧 浏览 2463

郭磊:如何认识最新的出口数据和出口形势

首席经济学家论坛 浏览 33

氧气面罩可能失灵,2600架波音737被查

观察者网 浏览 27026

香港这一夜,62岁刘德华的“江湖地位”被展现得淋漓尽致

娱乐白名单 浏览 2549

轴距2750mm/720km续航 起亚EV5 720版于2月1日上市

网易汽车 浏览 2747
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
Copyright © 2020-2024,版权所有 xingchentong.com
沪ICP备20017958号-8