网易首页 > 网易号 > 正文 申请入驻

商汤发布并开源U1系列 单一模型架构能否撬动多模态市场

0
分享至

4月28日,商汤科技发布并开源日日新SenseNova U1系列原生理解生成统一模型。该系列基于今年3月商汤自主研发的NEO unify架构,在单一模型上统一了多模态理解、推理与生成。

传统多模态模型多采用视觉编码器搭配语言骨干的拼接方式,存在信息损耗。SenseNova U1去除了视觉编码器和变分自编码器,直接在像素上运行,重建统一表征空间。

该架构由商汤与南洋理工大学S Lab合作研发,让图像和文本在同一套表征体系中被直接处理,减少了模块间的信息损耗和延迟。

商汤本次开源的是轻量版SenseNova U1 Lite,包含两个规格:基于稠密网络的8B MoT版本,以及采用混合专家架构的A3B MoT版本。

相关代码已在GitHub和Hugging Face平台上线。商汤表示,未来计划推出体量更大的版本并公布详细技术报告。

效率是该模型较为突出的特点。8B参数规模下,它在多模态理解、生成与推理等多个维度上逼近甚至部分超越一些商业闭源模型。

在AI2D等理解基准中拿到91.7分,在复杂信息图生成任务中平均得分50.7,是目前开源模型里表现最强的。

在通用图像生成测试中,生成质量可比肩Qwen Image 2.0 Pro或Seedream 4.5,同时推理响应速度更快。

视觉推理方面,在VBVR(UMM)测试中拿到60.5分,高于Nano Bananaz的49.6。在WISE维度上取得69.0分,领先于Qwen Image的63.0。

此外,SenseNova U1支持连续性图文创作输出,只需单次单模型调用即可完成分步骤图文生成,图像风格保持高度连贯,这在行业内属首次实现。

该模型还表现出较强的物理空间理解能力,未来可应用于机器人系统,在单一模型闭环内完成环境感知、推理和任务执行。

商汤此次开源并非孤立行动。在国内开源大模型市场,阿里巴巴通义千问(Qwen)系列占据明显优势,截至2026年3月累计下载量突破10亿次,占全球开源模型总下载量50%以上。

DeepSeek则通过持续的价格策略压低了AI调用成本。商汤选择在这个时间点开源U1,市场分析认为其意图是从收取短期授权费转向构建开发者生态,复制阿里巴巴Qwen的路径,通过模型免费带动周边服务和基础设施实现商业变现。

开源能否帮助商汤在阿里Qwen已经占据主导的市场上打开局面,目前尚无定论。对商汤而言,关注点已从单一模型的技术指标,转向SenseNova整个生态系统的开发者活跃度和实际应用规模。

当技术架构的创新已经落地,接下来的问题在于开发者是否愿意迁移,以及与之配套的工具链和服务能否形成足够的黏性。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
原来名字起太大,一般人根本压不住!网友:教训,老祖宗早说过了

原来名字起太大,一般人根本压不住!网友:教训,老祖宗早说过了

夜深爱杂谈
2026-04-30 21:37:49
拯救骑士!11投砸出19分!神级三方大交易

拯救骑士!11投砸出19分!神级三方大交易

篮球实战宝典
2026-04-30 10:31:33
上海人用钱投票,全新ES8交付破万,蔚来在魔都杀疯了

上海人用钱投票,全新ES8交付破万,蔚来在魔都杀疯了

蓝色海边
2026-04-30 15:51:20
央媒发文,高调官宣梁朝伟新身份,定居日本传闻5个月前早有真相

央媒发文,高调官宣梁朝伟新身份,定居日本传闻5个月前早有真相

叨唠
2026-05-01 01:44:57
39只羊一夜惨死!农户家属:地里撒有剧毒农药,至今未找到肇事者

39只羊一夜惨死!农户家属:地里撒有剧毒农药,至今未找到肇事者

极目新闻
2026-04-30 20:08:43
布伦特原油突破112美元/桶,日内涨1.48%

布伦特原油突破112美元/桶,日内涨1.48%

每日经济新闻
2026-05-01 09:10:36
“只顾自己纹眉,不管女儿死活?”14岁女孩生日照,脸上全是槽点

“只顾自己纹眉,不管女儿死活?”14岁女孩生日照,脸上全是槽点

蝴蝶花雨话教育
2026-04-25 00:45:03
日本带头,28国在联合国围攻中国,中方有仇当场就报,审判已开始

日本带头,28国在联合国围攻中国,中方有仇当场就报,审判已开始

近史谈
2026-04-29 23:32:43
属鸡注意:5月1-5日,一位“陌生至亲”将成为你最大靠山

属鸡注意:5月1-5日,一位“陌生至亲”将成为你最大靠山

白浅娱乐聊
2026-05-01 08:01:08
国产榴莲爆发:树上熟、甜度爆表,中国人的榴莲自由,终于要来了

国产榴莲爆发:树上熟、甜度爆表,中国人的榴莲自由,终于要来了

椰青美食分享
2026-05-01 00:12:00
美专家亲口承认,卡住美军工脖子的,是当年他们甩给中国的小产业

美专家亲口承认,卡住美军工脖子的,是当年他们甩给中国的小产业

墨语家
2026-04-29 14:11:03
原董事长被曝涉嫌性侵,公司声明:属实

原董事长被曝涉嫌性侵,公司声明:属实

21世纪经济报道
2026-04-30 12:53:07
中国造不出高端发动机?日企拆开红旗车,发现中国已走在时代前面

中国造不出高端发动机?日企拆开红旗车,发现中国已走在时代前面

轩逸阿II
2026-04-24 10:31:00
中央定调,2026年养老金或将调整,5000元以上的人,能涨100元吗

中央定调,2026年养老金或将调整,5000元以上的人,能涨100元吗

社保小达人
2026-04-30 11:30:17
嫁富二代明星后,她住进北京豪宅,开劳斯莱斯,如今40岁又怀3胎

嫁富二代明星后,她住进北京豪宅,开劳斯莱斯,如今40岁又怀3胎

不似少年游
2026-04-10 22:23:54
千万企退人员多年合理诉求迟迟未落地!真实现状深度解析

千万企退人员多年合理诉求迟迟未落地!真实现状深度解析

匹夫来搞笑
2026-04-25 15:26:44
接到陌生电话先问这3个字!骗子听到马上挂断,记得转告身边人

接到陌生电话先问这3个字!骗子听到马上挂断,记得转告身边人

小谈食刻美食
2026-04-25 09:47:09
张凌赫片场两度倒地!低血糖只是借口?身高190cm体重曝光引众怒

张凌赫片场两度倒地!低血糖只是借口?身高190cm体重曝光引众怒

白面书誏
2026-04-29 19:18:48
领先老鹰47分,尼克斯创造季后赛历史半场最大领先分差

领先老鹰47分,尼克斯创造季后赛历史半场最大领先分差

懂球帝
2026-05-01 08:59:08
放弃免死金牌,数十架飞机连夜跑路,欧洲最强硬汉的底裤被扒光了

放弃免死金牌,数十架飞机连夜跑路,欧洲最强硬汉的底裤被扒光了

潋滟晴方DAY
2026-04-30 04:43:02
2026-05-01 09:59:00
i黑马 incentive-icons
i黑马
抄本质 找灵感 挖黑马
68847文章数 261914关注度
往期回顾 全部

科技要闻

苹果上季在华收入继续大增 iPhone收入新高

头条要闻

牛弹琴:特朗普还是没抵住诱惑 诱惑中果然有陷阱

头条要闻

牛弹琴:特朗普还是没抵住诱惑 诱惑中果然有陷阱

体育要闻

季后赛场均5.4分,他凭啥在骑士打首发?

娱乐要闻

孙杨博士学历有问题?官方含糊其辞

财经要闻

GPU神话松动,AI真正的战场变了

汽车要闻

专访捷途汪如生:捷途双线作战 全球化全面落地

态度原创

旅游
时尚
本地
公开课
军事航空

旅游要闻

“跟着演出去旅行” 解锁文旅新体验

今年夏天的裙子,长长长长一点更好看!

本地新闻

用青花瓷的方式,打开西溪湿地

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

伊朗:持续推进海上封锁的行为不可容忍

无障碍浏览 进入关怀版