网易首页 > 网易科技 > 网易科技 > 正文

OpenAI组建新团队:收集公众意见以确保AI大模型"与人类价值观保持一致"

0
分享至

1月17日消息,美国当地时间周二,人工智能领域的佼佼者OpenAI在其博客上宣布,他们正在组建一个名为“集体对齐”(Collective Alignment)的全新团队。

这个团队主要由研究人员和工程师构成,将专注于设计和实施收集公众意见的流程,以帮助训练和塑造其人工智能模型的行为,从而解决潜在的偏见和其他问题。

OpenAI在博客中阐述道:“我们的目标是打造一个系统,它能够收集和‘编码’公众对我们模型行为的看法,并将这些宝贵的见解融入我们的产品和服务中。这样一来,我们未来的人工智能模型就能更好地‘与人类价值观保持一致’。”

为了实现这一目标,OpenAI正积极招募来自不同技术背景的研究工程师加入这个新团队。他们表示:“我们将与外部顾问和其他团队紧密合作,包括开展试点工作,将原型整合到我们的模型中。我们需要来自不同领域的专家,共同助力这项工作的推进。”

这个“集体对齐”团队其实是OpenAI去年5月启动的公共项目的一个延伸。该项目旨在资助建立一个“民主程序”的实验,以确定人工智能系统应遵循的规则。OpenAI曾明确表示,该计划旨在资助个人、团队和组织开发概念验证,以回答有关人工智能护栏和治理的问题。

研究工程师、OpenAI新团队创始成员泰纳·埃伦杜(Tyna Eloundou)强调:“随着我们不断追求超级智能模型的发展,这些模型将逐渐成为我们社会不可或缺的一部分。因此,让人们有机会直接提供意见至关重要。”

例如,为了确保只有人类才能参与投票和提供意见,OpenAI还考虑与Worldcoin进行合作。Worldcoin是OpenAI首席执行官萨姆·奥特曼(Sam Altman)创建的一个加密货币项目,它提供了一种有效区分人类和人工智能机器人的方法。

自2022年底推出ChatGPT以来,OpenAI凭借其生成式人工智能技术吸引了公众的广泛关注。这种技术能够利用简单的提示生成文本,使ChatGPT成为有史以来增长最快的应用程序之一。

然而,人工智能技术的快速发展也引发了人们的担忧。特别是其创造“深度伪造”图片和其他错误信息的能力,让人们在即将到来的2024年美国大选前夕感到不安。批评人士指出,像ChatGPT这样的人工智能系统由于其输入数据的影响而具有固有的偏见,用户已经发现了一些人工智能软件输出中存在种族主义或性别歧视的例子。

在最新的博客文章中,OpenAI回顾了资助受助者的工作成果,包括视频聊天界面、人工智能模型众包审计平台以及“将信念映射到可用于微调模型行为的维度的方法”。同时,他们还公开了所有受助者工作中使用的代码以及每个提案的简要摘要。

尽管OpenAI试图将该项目描述为与其商业利益无关,但考虑到其首席执行官奥特曼对欧盟人工智能监管的批评态度,这一说法似乎有些难以令人信服。奥特曼以及OpenAI总裁格雷格·布罗克曼(Greg Brockman)和首席科学家伊利亚·苏茨凯弗(Ilya Sutskever)一再强调,人工智能的创新速度非常快,以至于我们无法指望现有的权威机构能够充分控制这项技术。因此,他们提出了将这项工作众包的解决方案。(小小)

延伸阅读
相关推荐
热点推荐
李菁收徒,李金斗主持,应宁王玥波出席,李菁评书门师父到底是谁

李菁收徒,李金斗主持,应宁王玥波出席,李菁评书门师父到底是谁

安海客
2026-05-10 17:22:35
湖人队艾顿因佩戴印有自己绰号“DominAyton”的项链,而遭人嘲讽

湖人队艾顿因佩戴印有自己绰号“DominAyton”的项链,而遭人嘲讽

好火子
2026-05-12 04:35:42
你们都是什么时候对男女之事开窍的?网友:果然还是拦不住有心人

你们都是什么时候对男女之事开窍的?网友:果然还是拦不住有心人

夜深爱杂谈
2026-02-21 21:37:02
0-4无缘东决,3-0剑指西决!1换4交易埋下祸根,莫狗一步错步步错

0-4无缘东决,3-0剑指西决!1换4交易埋下祸根,莫狗一步错步步错

世界体育圈
2026-05-11 21:50:52
9天狂飙15倍!这只小票1215元封神,千元股神话如何炼成?

9天狂飙15倍!这只小票1215元封神,千元股神话如何炼成?

慧眼看世界哈哈
2026-05-11 16:13:25
人类全部的政治困境,都在这场会议里

人类全部的政治困境,都在这场会议里

尚曦读史
2026-05-11 07:04:06
张康阳现状证明,不怕富二代躺平就怕有野心,仅5年千亿身价归零

张康阳现状证明,不怕富二代躺平就怕有野心,仅5年千亿身价归零

青杉依旧啊啊
2026-03-19 22:10:26
慈利阻击战有多猛?南京大屠杀元凶13师团65联队,几乎被74军全歼

慈利阻击战有多猛?南京大屠杀元凶13师团65联队,几乎被74军全歼

浩渺青史
2026-05-11 17:49:38
北大医院官宣:大幅上调夜班费,高达300元/班次,覆盖医护技!12万人研究发现医务人员离职主因是夜班!夜班津贴是正常薪资构成,名正言顺

北大医院官宣:大幅上调夜班费,高达300元/班次,覆盖医护技!12万人研究发现医务人员离职主因是夜班!夜班津贴是正常薪资构成,名正言顺

梅斯医学
2026-05-12 07:53:51
陈行甲,何苦硬汉变软蛋?

陈行甲,何苦硬汉变软蛋?

稿得轻松
2026-05-11 21:04:40
官宣 | 天津市政府批复!管辖范围变更!

官宣 | 天津市政府批复!管辖范围变更!

天津广播
2026-05-11 11:42:12
NBA乐透抽签揭晓!奇才状元爵士榜眼灰熊探花 快船幸运获得5号签

NBA乐透抽签揭晓!奇才状元爵士榜眼灰熊探花 快船幸运获得5号签

罗说NBA
2026-05-11 04:54:29
善恶有报!许家印刚认罪1天,子女近况曝光,大儿子的安排全白费

善恶有报!许家印刚认罪1天,子女近况曝光,大儿子的安排全白费

历史伟人录
2026-05-10 22:06:40
歌手黄霄云演出后两次晕倒确诊耳石症!连夜赶路连唱9首,工作室强制停工

歌手黄霄云演出后两次晕倒确诊耳石症!连夜赶路连唱9首,工作室强制停工

TVB的四小花
2026-05-11 13:59:18
维生素B12立大功!研究发现:老人吃维生素B12,或能缓解5慢性病

维生素B12立大功!研究发现:老人吃维生素B12,或能缓解5慢性病

健康之光
2026-05-11 13:33:31
离开郭富城嫁给郭可颂后,熊黛林再次重蹈覆辙,她的委屈没人能懂

离开郭富城嫁给郭可颂后,熊黛林再次重蹈覆辙,她的委屈没人能懂

绚丽的画卷
2026-05-11 13:46:33
世界杯还没开踢,中国球迷先“退票”了

世界杯还没开踢,中国球迷先“退票”了

每日经济新闻
2026-05-11 22:56:12
难怪日本女乒敢冲金牌,原来主教练是她,是马琳师兄却落选国家队

难怪日本女乒敢冲金牌,原来主教练是她,是马琳师兄却落选国家队

阿伧说事
2026-05-11 20:36:36
特朗普盟友访华,在中国地盘耍威风?王毅6个字,值得美认真领悟

特朗普盟友访华,在中国地盘耍威风?王毅6个字,值得美认真领悟

田柳
2026-05-12 09:00:26
十大元帅中真正拉起一支队伍的,仅有两个半,他们被我们称为老总

十大元帅中真正拉起一支队伍的,仅有两个半,他们被我们称为老总

史之铭
2026-04-18 03:41:39
2026-05-12 09:35:00

科技要闻

纳德拉法庭爆料:拒当“AI时代的IBM”

头条要闻

牛弹琴:特朗普要来了 可以肯定这不是一次寻常的访问

头条要闻

牛弹琴:特朗普要来了 可以肯定这不是一次寻常的访问

体育要闻

梁靖崑:可能是最后一届了,想让大家记住这个我

娱乐要闻

“孕妇坠崖案”王暖暖称被霸凌协商解约

财经要闻

特朗普要来了,我们且淡定

汽车要闻

吉利银河“TT”申报图曝光 电动尾翼+激光雷达

态度原创

艺术
旅游
房产
教育
公开课

艺术要闻

江青早年电影照曝光,手稿惊艳引热议。

旅游要闻

首航售罄,账本承压:“长江行·揽月”号驶入三峡旅游的深水区

房产要闻

产业赋能教育!翰林府与北师大的这场签约,绝不那么简单!

教育要闻

有公费海外交换机会的院校(妈妈!免费旷野!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版
×