网易首页 > 网易号 > 正文 申请入驻

让数据工厂像水厂、电厂一样运作?这份白皮书给出实操指南

0
分享至

7月16日,由北京交通大学、北京化工大学牵头,来自33家企业、高校、机构等80余位作者参与编制的《数据工厂白皮书》(下称《白皮书》)正式发布。南都记者了解到,这是我国第一本关于数据工厂政策、理论、实践的研究成果,重点阐释了为支撑人工智能技术迭代升级,加快建设高质量数据集的规模化生产设施“数据工厂”的必要性以及具体做法。


《白皮书》发布现场。

当前,人工智能正以惊人的速度重塑世界,一个根本性的问题日益凸显——支撑AI不断进化的“燃料”从何而来?国家数据局发布的《全国数据资源调查报告(2025年)》显示,2025年国内AI推理数据量达101.34EB,首次超越98.14EB的训练数据量,标志着人工智能已正式跨过学习阶段、步入规模化应用阶段。人工智能的迅速迭代离不开“优质燃料”的支撑,高质量数据集已成为制约其技术水平提升和应用领域拓展的关键瓶颈。

然而,《白皮书》通过分析国内外数据工厂探索实践概况等指出,目前高质量数据集短缺问题依然突出。现有高质量数据集建设大多由人工智能厂商自行构建,呈现零散式、作坊式、非标化等特点,远远无法满足大模型应用的数据需求,导致市面上各类模型能力趋同,难以突破专业场景应用。

“正如工业社会的水有水厂、电有电厂一样,数智社会也必须有数据工厂。”《白皮书》指出,基础资源的规模化、标准化、设施化生产使用离不开资源型基础设施建设,建议借鉴水、电、燃料等基础设施的发展规律,加快建设高质量数据集的规模化生产设施——“数据工厂”,由其将海量原始数据加工处理为可供人工智能训练推理的高质量数据集,为智能化转型提供源源不断的“数据燃料”。

发布会上,《白皮书》主编之一、国家数据专家咨询委员会委员张向宏着重介绍了数据工厂的构成、定位和功能。具体来看,广义数据工厂是一个包括国家数据基座、国家数据工厂、国家人工智能训练场的数据生态系统,共同形成高质量数据集设施化供给闭环。狭义数据工厂指构建一个面向人工智能大模型应用,开展高质量数据集设施化、规模化、标准化生产的数据基础设施,包括储备车间、生产车间和中试车间三部分。





其中,储备车间主要负责数据资源的规模化收储、标准化预处理、体系化管理,涉及数据采集、数据预处理、数据存储和管理等;生产车间主要负责对储备数据进行深度加工处理,规模化生产可供人工智能大模型训练、微调、推理的高质量数据集,涉及数据清洗、数据合成、数据标注等;中试车间主要负责对生产出来的高质量数据集开展问题排查、质量评估、模型适配和优化数据,确保高质量数据集符合模型训练要求,涉及模型训练评估、模型推理评估等。

在运营模式方面,张向宏指出,保障模式、定制模式、电商模式和结对子模式将成为今后较长一段时间探索采用的主要模式。他还强调,数据工厂应根据不同类型和不同建设模式,采用不同的运营机制,“比如遇到国家重大战略需求,最好使用保障模式,社会公益技术需求、创新需求最好使用定制模式……最终目标是在市场成熟后主要采用电商模式,实现供给和需求的精准匹配。”他说。

值得关注的是,数据工厂作为数智社会的一种新兴生产业态,目前还处于刚刚起步的萌芽阶段,如何助力其稳步发展?《白皮书》指出,其建设和运营需要政策引导、标准规范、技术突破和平台支撑的系统保障。

具体包括,应加快出台促进数据工厂创新发展的政策文件,启动数据资源汇聚整合、数据集生产、质量评估、流通应用等全链条标准研制,突破非结构化数据采集、海量数据存储、智能化数据加工、数据集质量评估等关键技术瓶颈,建设数据资源汇聚、数据集生产、数据流通、人工智能训练等支撑平台。

采写:南都N视频记者 樊文扬

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
普京:包围并消灭2000人的乌军集群,且在460平方公里区域内实施包围,这非比寻常;乌克兰打击“俄罗斯的谷歌”,互联网成新战场前线

普京:包围并消灭2000人的乌军集群,且在460平方公里区域内实施包围,这非比寻常;乌克兰打击“俄罗斯的谷歌”,互联网成新战场前线

扬子晚报
2026-10-17 19:49:23
终于知道为什么大家都说农学是抑郁率最低的专业了!

终于知道为什么大家都说农学是抑郁率最低的专业了!

另子维爱读史
2026-10-18 11:46:21
我国著名主持人赴瑞士安乐死,儿子讲述其死前惨状:我非常后悔

我国著名主持人赴瑞士安乐死,儿子讲述其死前惨状:我非常后悔

小兔子的快乐
2026-10-12 11:30:52
密密麻麻!33岁女子体内取出197枚,医生:从医以来第一次见

密密麻麻!33岁女子体内取出197枚,医生:从医以来第一次见

上海约饭局
2026-09-19 10:42:08
穆帅率皇马4:1大胜塞维利亚,穆帅暂时续命;传闻皇马主席已找好穆帅替代者

穆帅率皇马4:1大胜塞维利亚,穆帅暂时续命;传闻皇马主席已找好穆帅替代者

福酱的小时光
2026-10-19 06:11:15
日本开发者心态崩了:9年做的游戏遭中国人破解修改

日本开发者心态崩了:9年做的游戏遭中国人破解修改

游民星空
2026-10-18 17:19:32
央八谍战王炸来了!张若昀王阳强强对决

央八谍战王炸来了!张若昀王阳强强对决

小椰的奶奶
2026-10-19 15:13:26
乌总统称合作伙伴再次未预警俄袭击

乌总统称合作伙伴再次未预警俄袭击

界面新闻
2026-10-19 16:43:23
老泄残精,人穷寿尽!医生提醒:68岁之后,男性要守好这5道关

老泄残精,人穷寿尽!医生提醒:68岁之后,男性要守好这5道关

华庭讲美食
2026-10-19 19:41:03
冠军悬念保持至今,2026中超的最大“惊喜”

冠军悬念保持至今,2026中超的最大“惊喜”

足球报
2026-10-19 10:30:10
我兄长65岁,在北京进行了心脏支架手术,以为安装好就安全了,但一周后不幸离世

我兄长65岁,在北京进行了心脏支架手术,以为安装好就安全了,但一周后不幸离世

坠入二次元的海洋
2026-10-19 16:09:59
出轨女子第二波聊天记录曝光,虎狼之词惊呆吃瓜网友,她嫌丢人开始批量投诉了

出轨女子第二波聊天记录曝光,虎狼之词惊呆吃瓜网友,她嫌丢人开始批量投诉了

汉史趣闻
2026-09-01 17:55:01
成都一场婚礼的寒酸程度把全国人民都看愣了

成都一场婚礼的寒酸程度把全国人民都看愣了

七月生活情感驿站
2026-10-11 21:16:41
林峰一家去斐济玩,6岁女儿公开大眼圆脸,第一次坐直升飞机兴奋

林峰一家去斐济玩,6岁女儿公开大眼圆脸,第一次坐直升飞机兴奋

椰黄娱乐
2026-10-19 12:03:46
72岁瘦成皮包骨,4天内辗转3座城市,赵雅芝这么拼命到底图啥?

72岁瘦成皮包骨,4天内辗转3座城市,赵雅芝这么拼命到底图啥?

悠悠说世界
2026-10-19 21:01:31
北京今晨最低气温创下半年新低!明天最高气温再降

北京今晨最低气温创下半年新低!明天最高气温再降

环球网资讯
2026-10-19 12:53:16
鹿晗在舞台上摔倒,本人回应:有个缝没看到,不小心滑了一下,我的问题

鹿晗在舞台上摔倒,本人回应:有个缝没看到,不小心滑了一下,我的问题

韩小娱
2026-10-18 22:48:23
一个日本华人表示,中国当前的生活水平相当于日本80年代

一个日本华人表示,中国当前的生活水平相当于日本80年代

聚焦真实瞬间
2026-10-19 21:06:47
29分19篮板11助攻,杨瀚森进步明显!主教练诺里:对瀚森表现满意

29分19篮板11助攻,杨瀚森进步明显!主教练诺里:对瀚森表现满意

光辉与阴暗
2026-10-18 21:46:15
当6.5%的人拿走四成:一张养老金账单背后的制度追问

当6.5%的人拿走四成:一张养老金账单背后的制度追问

金融科技一线
2026-10-10 08:53:24
2026-10-19 21:47:00
南方都市报 incentive-icons
南方都市报
换一种方式,南都在现场。
638686文章数 3591007关注度
往期回顾 全部

科技要闻

王晟:近千亿资金涌入后 具身智能开始退烧

头条要闻

女子随口一句"姐过得不太好" 8年前帮过的小伙飞来送钱

头条要闻

女子随口一句"姐过得不太好" 8年前帮过的小伙飞来送钱

体育要闻

从NBA退役10年后,他真去警局上班了

娱乐要闻

奚梦瑶回应重返维密:还是很开心的

财经要闻

黄奇帆之子往事:从广微系到魏桥的跳跃

汽车要闻

不知道二代海鸥多好玩? 上赛道跑两圈 很过瘾的

态度原创

本地
教育
家居
游戏
健康

本地新闻

因新荣记出圈,这座浙东小城才是吃货天堂

教育要闻

全国精神残疾高中在读仅 723 人:6 条容易被忽略的升学路径,很多家长都不知道

家居要闻

2026建博会(广州) 公装联探展交流活动

斗地主送卢本伟老婆1个亿结婚礼金!但是欢乐豆

看着很健康的人,怎么会突然猝死?

无障碍浏览 进入关怀版