网易首页 > 网易号 > 正文 申请入驻

让数据工厂像水厂、电厂一样运作?这份白皮书给出实操指南

0
分享至

7月16日,由北京交通大学、北京化工大学牵头,来自33家企业、高校、机构等80余位作者参与编制的《数据工厂白皮书》(下称《白皮书》)正式发布。南都记者了解到,这是我国第一本关于数据工厂政策、理论、实践的研究成果,重点阐释了为支撑人工智能技术迭代升级,加快建设高质量数据集的规模化生产设施“数据工厂”的必要性以及具体做法。


《白皮书》发布现场。

当前,人工智能正以惊人的速度重塑世界,一个根本性的问题日益凸显——支撑AI不断进化的“燃料”从何而来?国家数据局发布的《全国数据资源调查报告(2025年)》显示,2025年国内AI推理数据量达101.34EB,首次超越98.14EB的训练数据量,标志着人工智能已正式跨过学习阶段、步入规模化应用阶段。人工智能的迅速迭代离不开“优质燃料”的支撑,高质量数据集已成为制约其技术水平提升和应用领域拓展的关键瓶颈。

然而,《白皮书》通过分析国内外数据工厂探索实践概况等指出,目前高质量数据集短缺问题依然突出。现有高质量数据集建设大多由人工智能厂商自行构建,呈现零散式、作坊式、非标化等特点,远远无法满足大模型应用的数据需求,导致市面上各类模型能力趋同,难以突破专业场景应用。

“正如工业社会的水有水厂、电有电厂一样,数智社会也必须有数据工厂。”《白皮书》指出,基础资源的规模化、标准化、设施化生产使用离不开资源型基础设施建设,建议借鉴水、电、燃料等基础设施的发展规律,加快建设高质量数据集的规模化生产设施——“数据工厂”,由其将海量原始数据加工处理为可供人工智能训练推理的高质量数据集,为智能化转型提供源源不断的“数据燃料”。

发布会上,《白皮书》主编之一、国家数据专家咨询委员会委员张向宏着重介绍了数据工厂的构成、定位和功能。具体来看,广义数据工厂是一个包括国家数据基座、国家数据工厂、国家人工智能训练场的数据生态系统,共同形成高质量数据集设施化供给闭环。狭义数据工厂指构建一个面向人工智能大模型应用,开展高质量数据集设施化、规模化、标准化生产的数据基础设施,包括储备车间、生产车间和中试车间三部分。





其中,储备车间主要负责数据资源的规模化收储、标准化预处理、体系化管理,涉及数据采集、数据预处理、数据存储和管理等;生产车间主要负责对储备数据进行深度加工处理,规模化生产可供人工智能大模型训练、微调、推理的高质量数据集,涉及数据清洗、数据合成、数据标注等;中试车间主要负责对生产出来的高质量数据集开展问题排查、质量评估、模型适配和优化数据,确保高质量数据集符合模型训练要求,涉及模型训练评估、模型推理评估等。

在运营模式方面,张向宏指出,保障模式、定制模式、电商模式和结对子模式将成为今后较长一段时间探索采用的主要模式。他还强调,数据工厂应根据不同类型和不同建设模式,采用不同的运营机制,“比如遇到国家重大战略需求,最好使用保障模式,社会公益技术需求、创新需求最好使用定制模式……最终目标是在市场成熟后主要采用电商模式,实现供给和需求的精准匹配。”他说。

值得关注的是,数据工厂作为数智社会的一种新兴生产业态,目前还处于刚刚起步的萌芽阶段,如何助力其稳步发展?《白皮书》指出,其建设和运营需要政策引导、标准规范、技术突破和平台支撑的系统保障。

具体包括,应加快出台促进数据工厂创新发展的政策文件,启动数据资源汇聚整合、数据集生产、质量评估、流通应用等全链条标准研制,突破非结构化数据采集、海量数据存储、智能化数据加工、数据集质量评估等关键技术瓶颈,建设数据资源汇聚、数据集生产、数据流通、人工智能训练等支撑平台。

采写:南都N视频记者 樊文扬

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
俄军不宣而战,乌首都炸成火海,中俄条约生效,泽连斯基临阵换将

俄军不宣而战,乌首都炸成火海,中俄条约生效,泽连斯基临阵换将

霁寒飘雪
2026-07-20 11:40:30
第二首歌裙子全开了?这位女歌手雨中拉链全毁,突发状况却获铁杆新粉丝

第二首歌裙子全开了?这位女歌手雨中拉链全毁,突发状况却获铁杆新粉丝

全栈遛狗员
2026-07-21 05:21:03
40分钟落下40枚弹道导弹!俄高密度攻势摧毁基辅10万平物流中心!

40分钟落下40枚弹道导弹!俄高密度攻势摧毁基辅10万平物流中心!

离离言几许
2026-07-21 18:31:24
真香:皇家马德里引援瞄准巴塞罗那世界杯夺冠功臣

真香:皇家马德里引援瞄准巴塞罗那世界杯夺冠功臣

本泽体育
2026-07-21 18:02:04
俄罗斯总统普京签署总统令,将现行中国公民入境免签政策延长至2027年12月31日

俄罗斯总统普京签署总统令,将现行中国公民入境免签政策延长至2027年12月31日

都市快报橙柿互动
2026-07-20 22:47:38
纯电900km续航!比亚迪新车曝光:8月上市

纯电900km续航!比亚迪新车曝光:8月上市

科技阿维
2026-07-21 21:25:15
撤离中国时头也不回,如今费尽心思想要回归,现在还有影响力吗?

撤离中国时头也不回,如今费尽心思想要回归,现在还有影响力吗?

史之铭
2026-07-22 04:48:53
委内瑞拉生活着20万华人,而最触目惊心也最值得玩味的是——其中近乎九成的人,全都源自同一个

委内瑞拉生活着20万华人,而最触目惊心也最值得玩味的是——其中近乎九成的人,全都源自同一个

人生录
2026-07-22 00:05:16
有心栽花与无心插柳:韩鹏险些亲手打碎泰山的足协杯冠军梦

有心栽花与无心插柳:韩鹏险些亲手打碎泰山的足协杯冠军梦

光辉记
2026-07-22 01:32:09
父子反目?郭德纲悲痛发文,杨议曝光猛料,郭麒麟的处境早有预兆

父子反目?郭德纲悲痛发文,杨议曝光猛料,郭麒麟的处境早有预兆

晓肂爱八卦
2026-07-20 11:09:06
一个包厢230万美刀啊!这些大佬再低调,也被眼尖的网友扒出来了

一个包厢230万美刀啊!这些大佬再低调,也被眼尖的网友扒出来了

皮蛋儿电影
2026-07-21 07:05:35
玄学提醒:不要让任何人去你家,记住,是任何人

玄学提醒:不要让任何人去你家,记住,是任何人

新浪财经
2026-07-10 02:16:02
你谁啊?巴西队世界杯出局后,威尼修斯下巴整形,完全大变样!

你谁啊?巴西队世界杯出局后,威尼修斯下巴整形,完全大变样!

陈意小可爱
2026-07-21 11:11:35
年入百万补课老师吐实情:多数家长补课血汗钱,全都白白打水漂

年入百万补课老师吐实情:多数家长补课血汗钱,全都白白打水漂

鬼菜生活
2026-07-18 17:06:11
曾琦医生正式复出,坐诊义乌三甲医院,普通号30,专家号200瞬间秒空,网友都很支持她

曾琦医生正式复出,坐诊义乌三甲医院,普通号30,专家号200瞬间秒空,网友都很支持她

一盅情怀
2026-07-21 14:37:41
比阿根廷更差劲!伊布怒批世界杯大乱斗:西班牙全队太软弱!

比阿根廷更差劲!伊布怒批世界杯大乱斗:西班牙全队太软弱!

奶盖熊本熊
2026-07-22 04:21:41
胡金秋回应亿元报价:卖我能帮球队,我愿意走

胡金秋回应亿元报价:卖我能帮球队,我愿意走

慢歌轻步谣
2026-07-22 01:55:12
阿根廷队拒绝官方庆祝

阿根廷队拒绝官方庆祝

极目新闻
2026-07-21 15:29:34
还没签约就干到1.7亿美金!怪不得詹姆斯拖着呢!

还没签约就干到1.7亿美金!怪不得詹姆斯拖着呢!

柚子说球
2026-07-21 10:53:10
中央5台直播女排时间表:7月22日CCTV5直播,巴西VS日本冲击四强

中央5台直播女排时间表:7月22日CCTV5直播,巴西VS日本冲击四强

薇说体育
2026-07-21 11:59:15
2026-07-22 05:48:49
南方都市报 incentive-icons
南方都市报
换一种方式,南都在现场。
623217文章数 3589703关注度
往期回顾 全部

科技要闻

OpenAI高管:Kimi K3强到没法用"蒸馏"解释

头条要闻

建于山体内 特朗普首次明确点名伊朗第四大核设施

头条要闻

建于山体内 特朗普首次明确点名伊朗第四大核设施

体育要闻

“不会进球”的前锋,在世界杯决赛进球了

娱乐要闻

谢贤被曝已火葬,狄波拉携儿女送别

财经要闻

百虾竞速上车:4条路线争夺车载AI话语权

汽车要闻

WAIC专访|易启未来余志勇:网易孵化按摩机器人 能识穴会“手法”

态度原创

手机
教育
家居
健康
时尚

手机要闻

为iPhone Ultra准备好:苹果iOS 27代码首现双电芯设计

教育要闻

最后上本科的机会!江苏本科批次征平计划明天公布!

家居要闻

2026建博会(广州) 公装联探展交流活动

我这么年轻,也会中风吗?

整容、断骨、换血,欧美白男正扎堆服美役

无障碍浏览 进入关怀版