网易首页 > 网易科技 > 网易科技 > 正文

OpenAI组建新团队:收集公众意见以确保AI大模型"与人类价值观保持一致"

0
分享至

1月17日消息,美国当地时间周二,人工智能领域的佼佼者OpenAI在其博客上宣布,他们正在组建一个名为“集体对齐”(Collective Alignment)的全新团队。

这个团队主要由研究人员和工程师构成,将专注于设计和实施收集公众意见的流程,以帮助训练和塑造其人工智能模型的行为,从而解决潜在的偏见和其他问题。

OpenAI在博客中阐述道:“我们的目标是打造一个系统,它能够收集和‘编码’公众对我们模型行为的看法,并将这些宝贵的见解融入我们的产品和服务中。这样一来,我们未来的人工智能模型就能更好地‘与人类价值观保持一致’。”

为了实现这一目标,OpenAI正积极招募来自不同技术背景的研究工程师加入这个新团队。他们表示:“我们将与外部顾问和其他团队紧密合作,包括开展试点工作,将原型整合到我们的模型中。我们需要来自不同领域的专家,共同助力这项工作的推进。”

这个“集体对齐”团队其实是OpenAI去年5月启动的公共项目的一个延伸。该项目旨在资助建立一个“民主程序”的实验,以确定人工智能系统应遵循的规则。OpenAI曾明确表示,该计划旨在资助个人、团队和组织开发概念验证,以回答有关人工智能护栏和治理的问题。

研究工程师、OpenAI新团队创始成员泰纳·埃伦杜(Tyna Eloundou)强调:“随着我们不断追求超级智能模型的发展,这些模型将逐渐成为我们社会不可或缺的一部分。因此,让人们有机会直接提供意见至关重要。”

例如,为了确保只有人类才能参与投票和提供意见,OpenAI还考虑与Worldcoin进行合作。Worldcoin是OpenAI首席执行官萨姆·奥特曼(Sam Altman)创建的一个加密货币项目,它提供了一种有效区分人类和人工智能机器人的方法。

自2022年底推出ChatGPT以来,OpenAI凭借其生成式人工智能技术吸引了公众的广泛关注。这种技术能够利用简单的提示生成文本,使ChatGPT成为有史以来增长最快的应用程序之一。

然而,人工智能技术的快速发展也引发了人们的担忧。特别是其创造“深度伪造”图片和其他错误信息的能力,让人们在即将到来的2024年美国大选前夕感到不安。批评人士指出,像ChatGPT这样的人工智能系统由于其输入数据的影响而具有固有的偏见,用户已经发现了一些人工智能软件输出中存在种族主义或性别歧视的例子。

在最新的博客文章中,OpenAI回顾了资助受助者的工作成果,包括视频聊天界面、人工智能模型众包审计平台以及“将信念映射到可用于微调模型行为的维度的方法”。同时,他们还公开了所有受助者工作中使用的代码以及每个提案的简要摘要。

尽管OpenAI试图将该项目描述为与其商业利益无关,但考虑到其首席执行官奥特曼对欧盟人工智能监管的批评态度,这一说法似乎有些难以令人信服。奥特曼以及OpenAI总裁格雷格·布罗克曼(Greg Brockman)和首席科学家伊利亚·苏茨凯弗(Ilya Sutskever)一再强调,人工智能的创新速度非常快,以至于我们无法指望现有的权威机构能够充分控制这项技术。因此,他们提出了将这项工作众包的解决方案。(小小)

延伸阅读
相关推荐
热点推荐
今天A股突然大跌,原因找到了!明天行情听我一句!

今天A股突然大跌,原因找到了!明天行情听我一句!

一担金
2026-03-23 12:04:51
中方是否要求伊朗保证运往中国的石油安全?外交部回应

中方是否要求伊朗保证运往中国的石油安全?外交部回应

中国青年报
2026-03-23 16:46:48
金价断崖式下跌 全球抛售潮来袭!

金价断崖式下跌 全球抛售潮来袭!

闪电新闻
2026-03-23 10:52:49
震惊!绵阳三台县五家地产商承诺,不再出售低于5000起的住宅…

震惊!绵阳三台县五家地产商承诺,不再出售低于5000起的住宅…

火山詩话
2026-03-23 08:40:59
112.33亿!新乳业2025营收新高,五年战略结硕果

112.33亿!新乳业2025营收新高,五年战略结硕果

铑财
2026-03-23 16:55:40
国安部郑重提醒:手机这些功能别常开,及时关闭更安全

国安部郑重提醒:手机这些功能别常开,及时关闭更安全

Thurman在昆明
2026-03-22 21:15:07
女子打幼童骨折后续: 身份被扒,1000元私了遭拒,家属硬刚不和解

女子打幼童骨折后续: 身份被扒,1000元私了遭拒,家属硬刚不和解

潮鹿逐梦
2026-03-23 11:47:27
15岁女生在派出所遭猥亵!抚摸胸部及下体入口,民警被判2年9个月

15岁女生在派出所遭猥亵!抚摸胸部及下体入口,民警被判2年9个月

180视角
2026-03-23 15:40:52
别让患者失去选择创新医疗的权利

别让患者失去选择创新医疗的权利

一点财经
2026-03-20 20:53:48
上海这个区要起飞了?直达宁波,最快40分钟!中国最长跨海大桥安排上!

上海这个区要起飞了?直达宁波,最快40分钟!中国最长跨海大桥安排上!

上观新闻
2026-03-22 15:06:17
汪小宝满月照在全网萌炸了,老爸说他是来报恩的,这句话是真没错

汪小宝满月照在全网萌炸了,老爸说他是来报恩的,这句话是真没错

可乐谈情感
2026-03-23 15:44:02
为什么要对成品油价格采取临时调控措施?专家解读→

为什么要对成品油价格采取临时调控措施?专家解读→

极目新闻
2026-03-23 16:35:50
郑钦文:参加中网是个错误的决定,没有遵循医生的建议

郑钦文:参加中网是个错误的决定,没有遵循医生的建议

懂球帝
2026-03-23 11:19:57
伊朗媒体:一架美国战斗机被击落

伊朗媒体:一架美国战斗机被击落

新华社
2026-03-23 15:15:07
郭松民 | 嫉妒伊朗

郭松民 | 嫉妒伊朗

晴耕雨读社
2026-03-23 11:58:24
“地方附加税”改革将启,预计收税规模达万亿级,到底怎么调整?

“地方附加税”改革将启,预计收税规模达万亿级,到底怎么调整?

第一财经资讯
2026-03-22 20:02:12
拐点已至!GTC 2026 重磅启幕,黄仁勋将定义 AI 工业化新十年(附参会指南及观看抽奖) | 前沿在线

拐点已至!GTC 2026 重磅启幕,黄仁勋将定义 AI 工业化新十年(附参会指南及观看抽奖) | 前沿在线

前沿在线
2026-03-14 10:14:50
上海一中介为吃26万差价竟分饰两角:和卖家签“托底”,和买家签“居间”

上海一中介为吃26万差价竟分饰两角:和卖家签“托底”,和买家签“居间”

上观新闻
2026-03-23 06:53:05
法国专家预测伊朗战争将持续多久

法国专家预测伊朗战争将持续多久

参考消息
2026-03-23 15:32:14
快讯!土库曼斯坦正式宣布了!

快讯!土库曼斯坦正式宣布了!

达文西看世界
2026-03-23 10:45:09
2026-03-23 18:11:00

科技要闻

裁掉2万多名员工后,扎克伯格对自己下手了

头条要闻

伊朗豁出去了:若美以敢炸发电厂 整个中东就同归于尽

头条要闻

伊朗豁出去了:若美以敢炸发电厂 整个中东就同归于尽

体育要闻

不敢放手一搏,你拿什么去争冠?

娱乐要闻

刘烨47岁生日,安娜晒全家福为其庆生

财经要闻

沪指险守3800点!真正的恐慌盘出现了?

汽车要闻

"拒绝"豪车税 新款Panamera尽享版99.8万元起精准入局

态度原创

艺术
时尚
本地
数码
教育

艺术要闻

如此美妙的光影,安静而温暖,真令人折服!

“这条裙子”才是今年春天的顶流,怎么搭都好看

本地新闻

这里是宝鸡 嫽滴很!

数码要闻

韩国Upstage宣布将分阶段部署AMD Instinct MI355显卡加速器

教育要闻

教育部:抓源头管理 让专利“为转而生”

无障碍浏览 进入关怀版
×