网易首页 > 网易号 > 正文 申请入驻

蚂蚁集团研发多模态遥感基础模型SkySense,可用于地貌地物观测解译

0
分享至

2月28日,记者获悉,蚂蚁集团推出20亿参数多模态遥感基础模型SkySense,这是蚂蚁百灵大模型在多模态领域最新的研发成果,其论文已被世界计算机视觉顶会CVPR 2024接收。数据显示,SkySense在17项测试场景中指标均超过国际同类产品,这也是迄今为止国际上参数规模最大、覆盖任务最全、识别精度最高的多模态遥感基础模型。SkySense可用于地貌、农作物观测和解译等,有效辅助农业生产和经营。

(图片说明:SkySense在17项评测中均超过国际上最新的遥感模型)

随着人工智能的发展,大模型技术与卫星遥感技术相结合产生了新突破。SkySense是蚂蚁集团基于蚂蚁百灵大模型平台能力开发的多模态遥感模型。

SkySense在总计17项国际权威公开数据集进行了测评,其测试任务类型包括了土地利用监测、高分辨率目标识别、地物变化检测等7种常见遥感感知任务,并与国际上已发布的包括IBM和NASA联合研发的Prithvi等共18个全球主流同类模型做了测试结果比较。数据显示,17项测评中SkySense均名列第一。譬如,在国际高清遥感地物检测榜单FAIR1M 2.0中,SkySense平均精度(mAP)领先第二名超3%。

在刚刚公布的CVPR2024论文入选结果上,SkySense的研究成果亦被收录。CVPR是由IEEE举办的计算机视觉和模式识别领域的顶级会议,是国际计算机视觉三大顶会之一。

传统的遥感影像理解技术,往往侧重于针对单一模态单一任务建模,缺乏对多模态数据、时间序列、地理先验知识的综合建模和利用,限制了其在海量数据和多种任务中的泛化能力。SkySense突破以上技术瓶颈,实现了文本、红外光、可见光、SAR雷达多种模态、多分辨率的时序遥感影像建模,在多样化的任务中展现出优异性能。在蚂蚁百灵大模型多模态能力支持下,研发人员基于内部构建的19亿遥感影像数据集进行预训练,得到了20.6亿参数量的模型SkySense,这也是迄今为止国际上参数规模最大、覆盖任务最全、识别精度最高的多模态遥感大模型。SkySense可广泛应用于城市规划、森林保护、应急救灾、绿色金融、农业监测等重要领域,目前通过蚂蚁内部MEarth平台提供数据与识别服务。

据了解,蚂蚁集团正在计划开放Skysense模型参数,与行业共建,促进智能遥感技术与应用发展。

SkySense由蚂蚁AI创新研发部门NextEvo与武汉大学联合研发。NextEvo是蚂蚁AI核心技术研发团队,主导了蚂蚁百灵大模型的研发工作,其研发方向涉及CV、NLP、多模态、AIGC、数字人、AI工程化等核心技术。去年,该部门升级了多模态团队,由杨铭带队全面布局多模态技术。杨铭美国西北大学博士,Facebook AI Research (FAIR)创始成员,去年加入蚂蚁集团,先后就职于NEC美国实验室、FAIR、地平线机器人公司,是世界知名计算机视觉研究专家。

目前,蚂蚁集团多模态研究成果已应用于支付宝五福节AI大规模互动、蚂蚁医疗数字人等场景。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
福建男子因儿子成绩垫底暴怒,突然倒地被送抢救室!医生心惊:一根血管完全堵塞……

福建男子因儿子成绩垫底暴怒,突然倒地被送抢救室!医生心惊:一根血管完全堵塞……

福建卫生报
2026-11-20 13:08:58
比亚迪宣布:这款全新发动机将在2027年彻底颠覆整个电动汽车行业

比亚迪宣布:这款全新发动机将在2027年彻底颠覆整个电动汽车行业

侃故事的阿庆
2026-11-20 00:44:13
36岁奥斯卡影后当众掀衣秀假体:我是完整C杯

36岁奥斯卡影后当众掀衣秀假体:我是完整C杯

时光慢旅人
2026-11-20 11:03:53
51票反对48票赞成!特朗普刚从中国回美 就收到一张烫手的延期通知

51票反对48票赞成!特朗普刚从中国回美 就收到一张烫手的延期通知

去山野间追风
2026-11-20 21:33:02
乌克兰为啥选中俄美元首会晤时猛打?

乌克兰为啥选中俄美元首会晤时猛打?

虚声
2026-11-19 22:23:17
西方媒体:现在印度最怕的事情,就是变成中国和美国的 AI 殖民地!

西方媒体:现在印度最怕的事情,就是变成中国和美国的 AI 殖民地!

呼呼历史论
2026-11-20 15:08:58
复旦大学沈丁立的发言脱离国家底线!

复旦大学沈丁立的发言脱离国家底线!

故事终将光明磊落
2026-11-19 13:51:21
APEC现场 | 王毅外长新闻发布会场外,媒体记者排起50米长队

APEC现场 | 王毅外长新闻发布会场外,媒体记者排起50米长队

澎湃新闻
2026-11-19 22:11:09
13胜3负联盟第一!三大铁闸铸就湖人新体系,虎头蛇尾仍难冲冠

13胜3负联盟第一!三大铁闸铸就湖人新体系,虎头蛇尾仍难冲冠

你的篮球频道
2026-11-20 09:02:54
高三男孩喀纳斯湖失踪,母亲守岸7天后直言放弃,意外竟在此时发生

高三男孩喀纳斯湖失踪,母亲守岸7天后直言放弃,意外竟在此时发生

古怪奇谈录
2025-10-16 10:53:42
新罗德里!皇马巴萨死磕英超王牌!这次轮到伯纳乌要截胡

新罗德里!皇马巴萨死磕英超王牌!这次轮到伯纳乌要截胡

奶盖熊本熊
2026-11-20 09:19:44
美预言家朱迪再爆猛料:美日中命运已定,此岛将首遭灾

美预言家朱迪再爆猛料:美日中命运已定,此岛将首遭灾

心灵短笛
2025-05-12 10:05:25
发现一个奇怪的现象:电车没有干掉油车,却干掉了汽车修理厂!

发现一个奇怪的现象:电车没有干掉油车,却干掉了汽车修理厂!

補懂事的孩紙
2026-11-17 01:00:42
现货白银短线跳水 跌幅扩大至5%

现货白银短线跳水 跌幅扩大至5%

财联社
2026-11-20 06:04:05
丁彦雨航当面向巩晓彬说声道歉,逍遥王称其交友不慎暗讽睢冉

丁彦雨航当面向巩晓彬说声道歉,逍遥王称其交友不慎暗讽睢冉

姜大叔侃球
2026-11-19 22:25:35
文班亚马32分11板马刺轻取快船,卡斯尔21+6+12加兰23分5助

文班亚马32分11板马刺轻取快船,卡斯尔21+6+12加兰23分5助

湖人崛起
2026-11-20 11:31:13
马上停止吃这4种蔬菜,已被列入伤身“黑名单”,别再当家常菜了

马上停止吃这4种蔬菜,已被列入伤身“黑名单”,别再当家常菜了

39健康网
2026-11-19 19:31:52
孟子凯18分2板,浙江86-84击败山东,迎来CBA俱乐部杯小组赛首胜

孟子凯18分2板,浙江86-84击败山东,迎来CBA俱乐部杯小组赛首胜

侧身凌空斩
2026-11-20 22:02:49
CBA杯辽宁全华班狂送36助攻,赵继伟缺阵外援全休,今晚8点碰迪亚洛8投全中的山西,乌戈点破关键

CBA杯辽宁全华班狂送36助攻,赵继伟缺阵外援全休,今晚8点碰迪亚洛8投全中的山西,乌戈点破关键

篮球热嗖
2026-11-20 10:52:35
李子柒当选四川省文联副主席

李子柒当选四川省文联副主席

大风新闻
2026-11-20 17:42:03
2026-11-20 22:52:49
驱动中国 incentive-icons
驱动中国
国内知名的IT专业站点
95917文章数 138743关注度
往期回顾 全部

科技要闻

老黄想回来?英伟达董事会:没门

头条要闻

中国女子在希腊失踪半年 保险箱发现10万欧元现金

头条要闻

中国女子在希腊失踪半年 保险箱发现10万欧元现金

体育要闻

伪强队?拥4亿豪阵欧国联6连败+世界杯出局

娱乐要闻

陈晓楠对话厉娜和许飞引全网热议

财经要闻

10万人逼宫英伟达,黄仁勋要复职了?

汽车要闻

全新红旗H9最有意思的地方,是它开始有自己的豪华逻辑了

态度原创

房产
教育
旅游
时尚
游戏

房产要闻

6.6亿!海口卖地!

教育要闻

济南市历下区燕山小学教育集团将出席2026第四届课博会,解码“做中学”视域下小学科学教育生态构建

旅游要闻

青岛冬日赏鸥地图|沿着海岸线,赴一场海鸥之约

秋天衣服别总穿纯色,试试这几件条纹单品,简单时尚又减龄

PC Gamer试玩GTA6百小时:双主角出色但任务重复

无障碍浏览 进入关怀版