网易首页 > 网易科技 > 网易科技 > 正文

从数据湖到数据海:AWS“数据女掌门”谈向量时代的新底座

0
分享至


在生成式AI和Agentic AI席卷全球的2025年,数据基础设施正在经历一场“静悄悄的重构”。

在re:Invent现场,网易科技等与Mai-Lan Tomsen Bukovec展开深度对话。她是亚马逊云科技技术副总裁,掌舵数据与分析业务。

Mai-Lan的判断清晰直接。数据世界正在从“数据湖”走向“数据海”,而真正决定AI上限的,不再只是算力,而是能否以可负担的成本,让所有数据都被向量化、被理解、被使用。

她领导着以Amazon S3产品为主的全球技术和服务团队。资料显示,Amazon S3(Simple Storage Service)是亚马逊云科技提供的对象存储服务,用于在云端以几乎无限扩展的方式存储和访问各种数据,是全球应用最广泛的数据存储基础设施之一。

在对话开场,Mai-Lan 提及一个形象的比喻——“数据海”。她表示,索尼在今年大会上提出这个概念,是因为其业务早已深度建立在数据之上,从游戏到娱乐,所有业务都浸泡在数据里。

事实上,若要追溯传统数据存储的演进。最早是日志、图片、视频、PDF等非结构化数据,这也是最初的 Amazon S3典型场景。而大约五年前,表格数据快速增长,客户在对象存储之上开始构建数据湖仓一体架构,此时亚马逊云科技顺势推出 Amazon S3 Table,让其兼容 Iceberg 的各种分析引擎。在亚马逊云科技的体系中,Iceberg 已成为 S3数据湖的事实标准表格式,被广泛用于湖仓一体、实时分析和 AI 数据管道。

在Mai-Lan看来,这正是“数据湖扩展为数据海”的过程:各种结构化、半结构化与非结构化数据被统一沉淀在同一底层之上,并逐步被表结构和治理能力“重新组织”。

而真正把数据海洋推向新阶段的是向量化。

“向量是AI的语言。”Mai-Lan 强调。通过嵌入模型,无论源数据是表格、日志还是PDF,都可以被转化为向量。这个时候,机器不再只看文件名和标签,而是理解这段内容在语义上像什么。

据介绍,亚马逊云科技推出的Amazon S3向量存储,单个索引可以容纳2亿条向量;单一“向量桶”可以支撑数十万亿维度级别的向量数据;可以在百毫秒级响应时间内,完成语义检索和混合搜索;与专业向量数据库相比,成本最多可节省约90%。

Mai-Lan 用了一连串客户案例,解释这种变化的价值。

她告诉网易科技,宝马集团拥有约20PB 级别的数据链路,覆盖制造、工程、售后等多类数据。借助向量与 SQL 过滤结合的混合搜索,他们可以跨结构化表与文档,追问过去难以实现的问题,例如“找出上个月某车型在特定部件上的情况”。

再比如,社交与内容公司 mixi 希望为用户所有照片构建语义索引,让用户可以直接问:“帮我找出儿子和女儿一起的照片”,并进一步触发个性化打印推荐。这种场景过去几乎只能依赖人工打标签,如今通过向量可以在图像内容维度做相似性检索。

在 Mai-Lan 看来,这类案例背后的本质是,向量第一次让企业有能力,把“所有历史资产”而非“少数精选数据集”纳入 AI 视野。

然而,让数据“被看见”只是第一步,如何让大家“用得起”呢?

Mai-Lan 进一步介绍道,亚马逊云科技在Amazon S3上推行的智能分层(Intelligent-Tiering),本质上就是“自动化成本优化”即,如果某类数据30天未被访问,自动下调价格;若90天未访问,进一步降价;客户无需手动迁移“冷数据”,只需把存储类设为智能分层即可。

她透露,自2019年起,这一机制已经为客户自动节省了超过60亿美元的存储成本。

而站在更长远的视角看,Mai-Lan认为,当数以百万计的Agents 7×24小时运行,真正的瓶颈不在模型,而在能否为它们提供一个低成本、可扩展、可长期记忆的超大规模数据层。这是“数据海的底座”,也是她和团队正在押注的方向。

(作者/定西)

本文来自网易科技报道,更多资讯和深度内容,关注我们。

延伸阅读
相关推荐
热点推荐
国家铁路局原局长费东斌被“双开”:结交政治骗子,大搞权钱交易

国家铁路局原局长费东斌被“双开”:结交政治骗子,大搞权钱交易

界面新闻
2025-12-05 16:18:02
被超级APP忽视的需求,用户自己来做了

被超级APP忽视的需求,用户自己来做了

定焦One
2025-12-05 10:23:35
中法谈完,马克龙离开人民大会堂,临走前通告全球,日本怕啥来啥

中法谈完,马克龙离开人民大会堂,临走前通告全球,日本怕啥来啥

影孖看世界
2025-12-04 19:31:35
海关在旅客随身佩戴挂件中检出放射性核素,辐射超标1686倍,旅客:是朋友送的“护身符”

海关在旅客随身佩戴挂件中检出放射性核素,辐射超标1686倍,旅客:是朋友送的“护身符”

极目新闻
2025-12-04 14:01:02
国乒吞第二败!王楚钦遭德国33岁老将爆冷 世界第一不敌世界第21

国乒吞第二败!王楚钦遭德国33岁老将爆冷 世界第一不敌世界第21

颜小白的篮球梦
2025-12-05 14:43:21
北京日报文章批“不在乎大国崛起,只在乎小民尊严”,被AI挑出满满逻辑硬伤

北京日报文章批“不在乎大国崛起,只在乎小民尊严”,被AI挑出满满逻辑硬伤

知识圈
2025-12-05 13:24:45
混合世界杯:大爆冷!王楚钦1:2输球,无缘胜利,孙颖莎主动让球

混合世界杯:大爆冷!王楚钦1:2输球,无缘胜利,孙颖莎主动让球

国乒二三事
2025-12-05 14:46:14
美军发动空袭

美军发动空袭

第一财经资讯
2025-12-01 18:40:46
郭华萍:表面是人民公仆,实际是电诈头目,现已落网被判终身监禁

郭华萍:表面是人民公仆,实际是电诈头目,现已落网被判终身监禁

禾寒叙
2025-12-04 20:26:43
雅迪、九号、小牛第2批新版国标车抢先看!103款已获批,商家不愁卖了!

雅迪、九号、小牛第2批新版国标车抢先看!103款已获批,商家不愁卖了!

木瓜新车指南
2025-12-05 15:06:32
八村塁绝杀三分湖人险胜猛龙,里夫斯44+11詹姆斯得分上双被破

八村塁绝杀三分湖人险胜猛龙,里夫斯44+11詹姆斯得分上双被破

湖人崛起
2025-12-05 10:59:09
13:30!A股直线拉升!刚刚,原因找到了!

13:30!A股直线拉升!刚刚,原因找到了!

中国基金报
2025-12-05 15:38:30
大蒜塞耳朵里太厉害了,10个人9个都用得到,看完赶快叮嘱家人

大蒜塞耳朵里太厉害了,10个人9个都用得到,看完赶快叮嘱家人

妙招酷
2025-12-02 00:06:08
奥司他韦医院开药86元,网上只要9元,为何售价差近9倍?卫健委、厂商回应

奥司他韦医院开药86元,网上只要9元,为何售价差近9倍?卫健委、厂商回应

红星新闻
2025-12-04 21:12:59
苹果突然官宣 iPhone 17 Pro 新配色,机圈炸了!

苹果突然官宣 iPhone 17 Pro 新配色,机圈炸了!

科技堡垒
2025-12-05 12:02:56
天塌了!高市未撤,川普又上!

天塌了!高市未撤,川普又上!

家传编辑部
2025-12-04 11:27:37
突感不适,躺在副驾驶睡着被贴条?车主感慨执法能否多点“人情味”;河南新乡城管回应

突感不适,躺在副驾驶睡着被贴条?车主感慨执法能否多点“人情味”;河南新乡城管回应

大风新闻
2025-12-05 15:35:03
2000万外卖骑手,困在新国标电动车

2000万外卖骑手,困在新国标电动车

凤凰网财经
2025-12-05 09:54:46
车评人陈震逃税百万被查,曾发微博称“逃税最可耻,且是犯罪行为”

车评人陈震逃税百万被查,曾发微博称“逃税最可耻,且是犯罪行为”

极目新闻
2025-12-05 14:04:49
老牌零售巨头宣布已关30家大卖场,开业近20年老店和3年新店均未能幸免

老牌零售巨头宣布已关30家大卖场,开业近20年老店和3年新店均未能幸免

新浪财经
2025-12-05 09:34:24
2025-12-05 17:48:49

科技要闻

花不完,根本花不完!老黄被迫"疯狂撒币"

头条要闻

71岁苏增添被判死缓:28年间受贿近2亿 搞钱色交易

头条要闻

71岁苏增添被判死缓:28年间受贿近2亿 搞钱色交易

体育要闻

詹姆斯:不会因纪录中断而不开心 关于我的负评都太愚蠢

娱乐要闻

杨幂热依扎同框互动好精彩

财经要闻

暗藏融资棋局 烟台万达广场赎回2日便转手

汽车要闻

至高省1.5万 问界/深蓝/蔚来等车企自掏腰包兜底购置税

态度原创

健康
旅游
教育
时尚
房产

甲状腺结节"排雷"指南

旅游要闻

穿越百年时光 打卡“冰雪奇境”横道河子

教育要闻

小学数学,巧求面积!

今日热点:周柯宇已正式成为中国公民;郭敬明给《月鳞绮纪》写了19首歌……

房产要闻

突发!15.6亿,清水湾巨无霸地块,马上要卖!

无障碍浏览 进入关怀版
×