网易首页 > 网易号 > 正文 申请入驻

在接下来70%的人生里,我可能都要问:这是AI做的吗?

0
分享至


AI 伪造这事儿真得管管了。

8 月 26 号上午,吉隆口岸刚发生泥石流悲剧,晚上就有 AI 造的假图了。


微博上流量大的那个,点赞已经八千多了,到现在还有不明真相的读者对着假图感慨。


下面唯一掏出证据辟谣的,拿的还是跟豆包对话的截图。。。


而且不但普通人,专业媒体也会中招儿。

今年 3 月初,美伊冲突期间,就出现了一次典中典的 AI 假图污染事件。

从源头供应商 SalamPix 开始,AI 造假的现场照片先是得到了法国一家正规图片社的信用背书,然后一路流入欧洲的各大主流媒体。

德国的老牌媒体《明镜》,荷兰最大的新闻通讯社 ANP 等等都被牵连进去,紧急发布声明,下架存疑的图片。


照这么下去,看到现场报道时,我们第一时间关注的可能就不是新闻本身了,而是先质疑这玩意儿到底是不是 AI 生成的。

那到底有没有办法管管呢?

为此我们测试了一些市面上常见的检测方法,还咨询了朱雀实验室的研究员,结果只能说,道高一尺,魔高一丈,现在还真没啥两全的法子。。。


比如官方最常用的手段,就是提前打水印,像是在生成的图片视频里钉上「AI 生成」四个大字儿。

这玩意儿显眼又直观,但太好去除了,以至于大伙儿开玩笑说现在 PS 的唯一用处,就是把这几个字儿给 P 掉。


所以说白了,这就是个声明,解决不了鉴伪的问题。

于是,更隐蔽一些的隐形水印就登场了。

比如很多大厂默认的 C2PA,会在图片生成的同时,将模型,生成工具之类的信息打包到图里边。

理想状态下,C2PA 甚至还能记录图片的编辑更改记录。


听着是不是有点像手机拍照的元数据,能记录照片的地理位置,相机的光圈大小。

诶,没错,C2PA 就是跟元数据差不多,一样美好,也一样脆弱。

像是截图裁剪,或者分享到微信压缩一下,这玩意儿就直接灰飞烟灭了。

比如这张 GPT Image 2 生成的图片,前脚刚下载下来,后脚放到 OpenAI 官方的验证器里,它就翻脸不认了,治标不治本。


然后咱的谷歌大善人就登场了,掏出了牛逼哄哄的SynthID 隐形水印

这玩意儿的定位才更像 AI 时代的东西,它不是把标签挂在文件本体外面,而是生成的时候,就把某种机器可识别的信号揉进图片,视频,音频,甚至文字里。

在技术论文中他们解释道,Gemini 在生成 token 的时候,会被这玩意儿微微干预,使得最终的产物 内容基本不变,但信号统计上,呈现某种痕迹和特征。

简单点说就是肉眼看不出来差别,但专门的检测器能认得。

除此之外,SynthID 比 C2PA 要更抗揍,普通的裁剪,滤镜,压缩基本都能拿下。


看效果这么好,隔壁的 OpenAI 也加入进来,比如以假乱真的 GPT Image 2 就支持 SynthID。

咱也是故技重施,试了一下,发现确实有点东西,大部分图片裁剪压缩,甚至加滤镜后,水印还是能被识别出来。


前些天 Anthropic 因为欧盟法规,也给 Claude 的文本加上了 SynthID 的水印,瞅着队伍是越来越大了,那等它全面覆盖,这事儿不就大结局了么?

诶,也没这么简单。

虽说同样是 SynthID,但检测器并不互通,Gemini 的图丢进 OpenAI 验证器里认不出来,反过来也一样。



向左滑动

这玩意儿现在还做不成统一的身份认证器,只能是各家自扫门前雪。

而且更麻烦的是,水印想要有用,就得能被检测,而一旦检测方案公开,围绕它的擦除,伪造和对抗也会随之而来。

像名声不咋样的 Anthropic,文本水印刚出来没几天,GitHub 上就出现了对抗的去水印项目,一个月不到就点到了两万颗星。


谷歌自己也承认,其实根本不存在什么完美安全的水印,他们的目的很现实,就是把攻击和伪造的成本抬高点。

所以第三方的检测器现在也很有市场,它们不依赖水印,而是能根据内容反推是否为 AI 生成。

但遗憾的是,我们测了一圈,发现这些检测器水平参差不齐,甚至有的只能说拉完了。

这里让 ChatGPT 生成 “ 伪史论 ” 的文章, 拿给不同的 AI 检测器。

四家国外的三家查不出 AI 痕迹,唯一支棱的 GPTZero,还把 2000 字的中文识别成了 49 个 words,弄半天哥们儿不认识中文。。。





向左滑动,依次为Originality.ai,winston,AISEO,GPTZero

而国内的情况也没好到哪去,万方仍旧 0%,维普那篇甚至扩写到两万字后,才检测出 0.42%。



向左滑动

可能也就朱雀 AI 检测器情况稍好,38% 的人工+62% 的疑似 AI,虽然没实锤,但起码也 “ 疑似 ” 了。


至于图片,情况可能比文本还复杂点。

拿朱雀来说,常规的模型,它的检测很精准。

比如 GPT Image 2 生成的马斯克抖音直播图,是 90% 的可疑度;


再生成一张历史高考卷给它,它甚至能锤死 100%,还一口咬定是 OpenAI 的风格。


但如果换成冷门的 “ 小众 ” 模型,它可能就垮掉了。

比如同样生成小猫舔人手的图,GPT 和 Gemini 的它都能认出来,但 Seedream 5.0 Lite 就只有 21.64% 的概率了,MiniMax 的 Hilo 2.0 更是干到了 4.9%,属于 “ 不太可能是 AI 生成 ” 那档。





(从左往右依次为:GPT,Gemini,Seedream,Hilo)

能力起伏这么大,我们也很好奇原因,于是直接询问了朱雀实验室的研究员。

得到的回复是,检测器的能力其实一直在迭代,新模型出来后,泛化和兼容都需要测试反馈来不断优化。

说人话就是如果出来个很牛逼的新模型,那确实没啥通用的招儿,只能拿新的素材不断训练,才能学会辨别的方法。

看网站注释也能发现,执行检测的模型是在不断更新的,现在的模型是 7 月 21 日的版本。


除此之外,他们还透露,检测的时候也会参考 C2PA 之类的水印信息,不过主要手段还是特征识别,像是文章的行文结构,用词句式,因果逻辑这些细节。

但说实话,这些特征还是过于常规,我们更在意的反而是他们提到的 “ 更高维度的不可解释特征 ”。

这部分说白了,就是模型训练中自己涌现出来的能力,能够捕捉一些 AI 独特的创作手法,就比如刚刚的四只猫,肉眼看基本没差,但朱雀的模型就是能品出来不同。


当然,训练检测模型这活儿也是过犹不及,一不小心,很容易 “ 训练过头 ”。

比如我们测了 3 次 X 的截图,作为造假重灾区,检测的概率徘徊在 50% 左右。


然后又喂给它一张安德鲁·库蒂斯的油画,由于画风跟 AI 极其相似,所以概率飙升到了 98.59%。


再极端一点,直接在画板上写下 AI 两个字母,概率也足足有 94.62%。


好在后来在纸上写 AI 俩字母,它没说是 AI 生成的,算是扳回一城。


从这些测试中也能看出,检测器的优缺点都很明显。

它通用的定位确实方便,不需要知道东西到底是 Gemini、GPT 还是哪个模型生成的,只要 AI 还留下某些共同特征,理论上它就有机会抓出来。

但问题同样出在这个通用的特征上,因为模型的学会不一定是真的学会。

像 X 截图这种造假重灾区,AI 就容易形成 “ 刻板印象 ”,看到这种特征,就觉得像 AI 生成的。

可以想到,如果以后这些图的特征越来越不明显,那用于鉴别的模型训练起来就会更难,此时,就得指望涌现出更多 “ 更高维度的不可解释特征 ” 了。。。


所以回到最初那个问题,好像的确没有一个按钮,能让互联网重新回到有图有真相的年代。

因为当 AI 真有一天能把光影、文字、物理规律全都做对的时候,再盯着画面里找第六根手指,也没什么意义了。

但就像货币制造一样,假币即使跟真币一模一样,但在法律层面,它还是假币。


或许未来真正重要的问题,并不是这张图是不是 AI 搓的,而是这张图到底是从哪儿来的。

水印不够咱就上隐形的,C2PA 能被洗掉,那就 SynthID,再不够就超进化朱雀配合 super pro max SynthID。

我们未必能让假东西彻底消失,但让造假没那么便宜,让被骗没那么容易还是大有可为的。

普通人刷个 AI 抽象小视频,可能没必要搞一套数字取证。

但一张号称来自灾害现场,战争前线的照片,确实值得更高的举证门槛。。。

撰文:风华

编辑:江江 & 面线

美编:焕妍

图片、资料来源

微博,OpenAI,抖音,C2PA,Gemini,GitHub,Originality.ai,winston,AISEO,GPTZero,朱雀AI检测器,纸钞屋,部分图源网络


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
李小冉节目首度聊到前夫,公开了离婚的原因,谈及过往委屈落泪

李小冉节目首度聊到前夫,公开了离婚的原因,谈及过往委屈落泪

小武侃风云
2026-09-11 23:30:05
资助5年,停捐被威胁 全是假的!现在被刑拘了

资助5年,停捐被威胁 全是假的!现在被刑拘了

慕容律师
2026-09-11 21:11:19
上手iPhone Duo后我改主意了:折叠屏为何必须做到这么好?

上手iPhone Duo后我改主意了:折叠屏为何必须做到这么好?

报错免疫体
2026-09-11 00:30:16
6-2赢球后,中国名将丁俊晖回应,斯诺克官方盛赞,英国媒体发声

6-2赢球后,中国名将丁俊晖回应,斯诺克官方盛赞,英国媒体发声

破镜难圆
2026-09-12 07:24:56
马特-劳:恩佐两次书面申请离队,称与切尔西所有队友关系破裂

马特-劳:恩佐两次书面申请离队,称与切尔西所有队友关系破裂

懂球帝
2026-09-11 22:11:41
美菲已用实际行动证明:一旦开战,中国航母根本没法通过巴士海峡

美菲已用实际行动证明:一旦开战,中国航母根本没法通过巴士海峡

掉了颗大白兔糖
2026-09-05 01:18:31
上海退休教授进敬老院5个月后去世,护工挺着大肚子含泪:这是遗书

上海退休教授进敬老院5个月后去世,护工挺着大肚子含泪:这是遗书

罪案洞察者
2025-08-08 11:40:08
彩虹星球称把铁头送进去判了8年,并强调自家产品没有问题

彩虹星球称把铁头送进去判了8年,并强调自家产品没有问题

映射生活的身影
2026-09-12 06:44:51
澳门冠军赛!八强全部出炉,诞生3大不可思议,陈幸同创乒坛奇迹

澳门冠军赛!八强全部出炉,诞生3大不可思议,陈幸同创乒坛奇迹

南海浪花
2026-09-12 03:14:03
李小冉节目上首谈前夫,坦诚公开离婚的原因,谈及过往委屈到落泪

李小冉节目上首谈前夫,坦诚公开离婚的原因,谈及过往委屈到落泪

小椰的奶奶
2026-09-12 00:04:25
中方发邀请,通告各国来京,共赴20周年之约,日本人已确定参会?

中方发邀请,通告各国来京,共赴20周年之约,日本人已确定参会?

阿嘵田侃故事
2026-09-12 07:24:07
同事上增程,我选纯电,开2000公里后我沉默:劝大家别盲目跟风!

同事上增程,我选纯电,开2000公里后我沉默:劝大家别盲目跟风!

娱乐圈的笔娱君
2026-09-06 15:43:27
不再只是口头挑衅!日本公然锁定台海出兵条件,中方手握终极反制底牌

不再只是口头挑衅!日本公然锁定台海出兵条件,中方手握终极反制底牌

怪味历史连连看
2026-09-11 01:17:29
严打股市“小作文” 证监会四份罚单剑指造谣传谣

严打股市“小作文” 证监会四份罚单剑指造谣传谣

证券时报
2026-09-12 06:14:05
家中10样东西,过期1天也要扔!第一名家家都有,毒性最大

家中10样东西,过期1天也要扔!第一名家家都有,毒性最大

健康之光
2026-09-11 17:50:48
中足联:韦世豪挑衅公众,停赛3场、罚款3万

中足联:韦世豪挑衅公众,停赛3场、罚款3万

界面新闻
2026-09-11 20:56:02
白露后,10斤莲藕不如一斤它,正大量上市,润肠健脾胃,滋养润肺

白露后,10斤莲藕不如一斤它,正大量上市,润肠健脾胃,滋养润肺

华庭讲美食
2026-09-11 08:27:18
特朗普如今才猛然惊醒:中国是一个"无法分割"的对手!

特朗普如今才猛然惊醒:中国是一个"无法分割"的对手!

王嚾晓
2026-09-11 16:58:47
TVB前男星雷宇扬突然离世!3年前发文悼念周海媚,妻子是广东台主持人

TVB前男星雷宇扬突然离世!3年前发文悼念周海媚,妻子是广东台主持人

我爱追港剧
2026-09-11 16:45:09
“眼神都拉丝了!”家长晒母子互动视频,引全网不适:儿大不避母的结果

“眼神都拉丝了!”家长晒母子互动视频,引全网不适:儿大不避母的结果

妍妍教育日记
2026-08-31 23:54:51
2026-09-12 10:03:00
差评XPIN incentive-icons
差评XPIN
用知识和观点Debug the world!
11466文章数 489827关注度
往期回顾 全部

科技要闻

苹果折叠屏比小米华为贵5000元,该怎么选

头条要闻

牛弹琴:一支拖鞋军突然扭转战局 正在改写中东格局

头条要闻

牛弹琴:一支拖鞋军突然扭转战局 正在改写中东格局

体育要闻

老鹰真正的底气来自于什么?

娱乐要闻

港媒曝钟丽淇疑患渐冻症,本人发文

财经要闻

继房子茅台之后 中产的第"神话"也破灭了

汽车要闻

买菜车也有小乐趣 风云T7不止是台合格家用SUV

态度原创

教育
艺术
手机
旅游
公开课

教育要闻

工作五年的一线语文教师:频繁内耗、家校学生沟通受挫,怎么办?

艺术要闻

《步辇图》最大骗局:全程没有文成公主,却骗了所有中国人 1300 年

手机要闻

三星向Tim Cook赠送Galaxy Z Fold 8 并幽默喊话“欢迎入场”

旅游要闻

景区“公厕关闭私厕收费”?山西碛口风景名胜区回应

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版