网易首页 > 网易科技 > 网易科技 > 正文

对抗网络暴力 Google的新工具可以识别恶意评论

0
分享至

(原标题:对抗网络暴力,Google 的新工具可以识别恶意评论)

黎方宇

在成千上万的网络言论中,区分出恶意的内容需要大量的金钱、劳动力和时间。不少网站因为不堪其扰关闭了评论区,这并不是合适的解决方案。

用人工智能给评论评分

Google正在解决这个问题。周四,这家公司公开发布了一项名为Perspective (意为“明察”)的人工智能工具,可以给网络发言评定恶意程度。这是内部智库Jigsaw(之前的Google Ideas)去年9月发起项目的成果,也是开源项目Conversation AI计划的一部分。

Perspective使用机器学习自动检测网络侮辱、骚扰和辱骂言论。在示范界面中输入一个句子或短语,AI可以立即评定其恶意程度,结果以“和攻击性评论相似度为百分之几”的形式显示,比任何关键字黑名单和人类管理员都要快。

Perspective是开放的API,可以接入现有网站,帮助管理员获取评论的得分情况。但Perspective不会决定如何处理恶意的评论。是否标记,会不会删除,或者是开发类似的打分系统,处理方式由内容发布商决定。

为了建立评分模型,Jigsaw团队获得了来自《纽约时报》的1700万条读者评论,维基百科编辑页面的数百万条讨论和其他合作网站的内容,并聘请了数千人来打分,每个评论会给10个人来评判。

这个工具已经在纽约时报、经济学人和卫报等网站测试,以期改善评论部分。目前测试需要邀请,年内接口将放开。

对抗网络暴力的一种思路

与以往方法的不同之处在于,新方法主要侧重于语言的评估,而非观点的评判。也就是说,不受欢迎的想法是可以接受的,只要清楚理性地提供论据即可。影响打分的是情绪化和攻击性的语言。这保护了不同观点的表达,同时有助于理性讨论环境的营造。

一个例子是,如果有人写“XXX是叛徒”,攻击指数为72%。但如果补充了论据支撑,如“XXX通过在阿萨德的新闻发布会以俄罗斯力不能及的方式帮他背书以帮助境外势力破坏美国在叙利亚的利益犯下叛国罪”(原文见福布斯报道),工具评分就只有11%。

也就是说,情绪化的短句子攻击指数更高,而有论据支撑的长句子评分会降低。至于论据是不是真相,Perspective 暂时还不能判断——这项工作还是读者自己查证比较好。

以美国总统特朗普评价媒体的推文做测试,攻击指数为8%

审查与自我审查

这项工具可以帮助促进更理性的互联网环境,或者,像批评者所称,是在以算法干扰公共讨论。

Perspective 遇到的问题首先是文法上的:一些字词在不同社群内有着不同的内涵。对特定群体有侮辱性的词,往往以各种方式被群体接纳,中文的例子比如“小粉红”和“白左”,在没有上下文的情况下判断评论者的立场显然很难。

此外,哪怕不考虑所谓的反串黑和春秋笔法,对社交媒体常见的略缩语、替换词、拼写重复目前也没有办法。而文字游戏正是网友擅长的,特别是长期受屏蔽词库训练的网友。

另一个担忧是Perspective 是否会损害言论自由。为了提高评论的评分,用户要么会开始自我审查,要么转而使用其他的服务,或者索性弃用。

对此,Jigsaw 总裁Jared Cohen 说,工具不是为了绕过人类的判断,而是把内容标记出来呈现给管理员。

没有评分工具的时候,默认的制度是人为的举报和审核。Perspective 只是提高了网站的效率,让他们不会再以关闭评论区的方式来解决问题。

Cohen 强调说,Perspective 是一项还在进行中的工作,需要人们为它作出贡献才会有所改善。并希望可以用于英语以外的其它语言。

Twitter、Facebook 等社交巨头都有反仇恨言论的工作。但靠压抑的方式营造出的理性乌托邦,在观点越来越撕裂的今天,有没有可能成为另一个言论滤泡?

但至少,目前攻击性言论让许多人感到不舒服的情况下,需要采取某种形式的行动。

题图:Pixabay

相关推荐
热点推荐
中国外交官已全部离开立陶宛,立总理对华递交建议书,想重建关系

中国外交官已全部离开立陶宛,立总理对华递交建议书,想重建关系

律便利
2025-07-03 15:20:03
74岁老汉上山采药救下怀孕母狼,当晚院中阵阵狼嚎,打开门后慌了

74岁老汉上山采药救下怀孕母狼,当晚院中阵阵狼嚎,打开门后慌了

温情邮局
2025-12-05 15:21:29
马竞天坑球员 7200万欧引进 现身价200万欧 外租赫罗纳8场0球

马竞天坑球员 7200万欧引进 现身价200万欧 外租赫罗纳8场0球

智道足球
2025-12-14 17:33:39
光刻机巨头开始慌了,中国造不成光刻机,但是要造一个光刻工厂

光刻机巨头开始慌了,中国造不成光刻机,但是要造一个光刻工厂

井普椿的独白
2025-12-14 18:40:49
A股:股民听我一句劝,周末突发两大利好,下周将迎大级别行情?

A股:股民听我一句劝,周末突发两大利好,下周将迎大级别行情?

夜深爱杂谈
2025-12-14 16:29:17
气愤!英媒公开贬低中国足球:充满劣根性,只会给球队带来灾难

气愤!英媒公开贬低中国足球:充满劣根性,只会给球队带来灾难

国足风云
2025-12-14 16:09:07
一个军走出三位大区司令,连警卫员都干到正国级,老军长见面却只喊他小王

一个军走出三位大区司令,连警卫员都干到正国级,老军长见面却只喊他小王

老杉说历史
2025-12-11 19:56:06
罕见!重庆江北机场,客流负增长!

罕见!重庆江北机场,客流负增长!

民航之翼
2025-12-13 17:57:16
偌大的海南岛面积足有3.4万平方公里,为啥却少有大型港口呢?

偌大的海南岛面积足有3.4万平方公里,为啥却少有大型港口呢?

向航说
2025-12-12 00:40:02
妻子从情夫家被送进ICU,医生催签字,我拨通了她爸妈的电话

妻子从情夫家被送进ICU,医生催签字,我拨通了她爸妈的电话

张道陵秘话
2025-12-12 10:59:13
1只就判刑! 青岛一家艺术中心杀3只, 做菜卖给客人

1只就判刑! 青岛一家艺术中心杀3只, 做菜卖给客人

万象硬核本尊
2025-12-14 18:22:32
脑梗的源头被查出,肥肉没上榜,第1名很多人可能每天都在吃!

脑梗的源头被查出,肥肉没上榜,第1名很多人可能每天都在吃!

全球军事记
2025-11-29 13:46:37
CBA新赛季!广东队4名球员,令人无比期待

CBA新赛季!广东队4名球员,令人无比期待

体育哲人
2025-12-14 17:15:38
哪个瞬间你秒懂了别人暗示?网友:医生暗示男孩就说脑壳有点大

哪个瞬间你秒懂了别人暗示?网友:医生暗示男孩就说脑壳有点大

带你感受人间冷暖
2025-12-13 00:15:04
河南天气大转折,新一轮雨雪过程酝酿中!河南未来三天天气详情

河南天气大转折,新一轮雨雪过程酝酿中!河南未来三天天气详情

夜深爱杂谈
2025-12-14 16:27:45
扎哈罗娃:俄罗斯对欧盟报复行动很快就到

扎哈罗娃:俄罗斯对欧盟报复行动很快就到

参考消息
2025-12-14 11:24:04
四川2名干部任代理市(区)长

四川2名干部任代理市(区)长

金台资讯
2025-12-14 15:38:20
为什么反感满清的情绪,会在今天突然集中爆发?

为什么反感满清的情绪,会在今天突然集中爆发?

西域都护
2025-12-13 23:55:19
万达:年底前还有8座万达广场开业

万达:年底前还有8座万达广场开业

观点机构
2025-12-14 17:52:05
为何翁帆那么怀念杨振宁,原因在一个称呼上,比老公、丈夫更深情

为何翁帆那么怀念杨振宁,原因在一个称呼上,比老公、丈夫更深情

以茶带书
2025-12-14 14:20:53
2025-12-14 20:12:49

科技要闻

当人形机器人有了App Store,宇树在赌什么

头条要闻

何晴唯一儿子已从中戏毕业 不久前和父亲合体亮相杂志

头条要闻

何晴唯一儿子已从中戏毕业 不久前和父亲合体亮相杂志

体育要闻

马刺终结雷霆:以勇猛,以文班亚马

娱乐要闻

何晴生前最大谣言!没有再婚嫁廖京生

财经要闻

重大违法强制退市!10人被判刑

汽车要闻

硬核敞篷巴士?掷弹兵Game Viewer 2026年初量产

态度原创

时尚
旅游
数码
教育
公开课

伊姐周六热推:《长安二十四计》;电视剧《唐诡奇谭》......

旅游要闻

“来宜泸耍一路”走进成都社区 百万粉丝达人带你“尝鲜”川南风味

数码要闻

百信太行国产台式机新品发布量产,搭载麒麟9000X处理器

教育要闻

必看!华南理工考点(4414)应试须知!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版
×