网易首页 > 网易号 > 正文 申请入驻

苹果发表Manzano:无损融合“看图”与“绘图”的多模态AI模型

0
分享至

IT之家 1 月 15 日消息,科技媒体 Appleinsider 今天(1 月 15 日)发布博文,报道称苹果发表重磅研究论文,详细介绍了名为“Manzano”的多模态模型,融合“视觉理解”与“文本生成图像”两大功能。

该模型最大的创新在于“双修”:它不仅能像人类一样精准理解图像内容(视觉理解),还能根据文本描述生成高质量图片(图像生成)。

行业内此前仅有少数模型能同时兼顾这两项任务,且往往需要在画质与理解力之间做出妥协,研究人员指出,核心矛盾在于“视觉分词”的方式不同。

简单来说,AI 进行“图像理解”时喜欢连续的数据流(类似看视频),而进行“图像生成”时则更依赖离散的数据块(类似拼图)。传统模型强行让同一个大脑处理这两种截然不同的信号,往往会导致严重的任务冲突,要么“看得懂但画不出”,要么“画得好但理解偏”。

Manzano 为了解决这一难题,引入了一种创新的三段式架构:

  • 首先,它使用“混合视觉分词器”同时生成连续和离散的视觉表示;
  • 接着,利用大语言模型(LLM)预测图像的语义内容;
  • 最后,将这些预测结果交给“扩散解码器”进行像素级渲染。

这种设计让 Manzano 既保留了强大的理解能力,又具备了精细的绘图能力,甚至能处理深度估计、风格迁移和图像修复等复杂任务。

测试数据显示,Manzano 在处理反直觉、违背物理常识的复杂指令时表现惊人。例如,当要求生成“一只鸟在大象下方飞翔”的画面时,Manzano 的逻辑准确性与 OpenAI 的 GPT-4o 以及谷歌的 Nano Banana 模型旗鼓相当。

研究团队测试了从 3 亿到 300 亿(30B)参数的不同版本,证实了该架构在模型规模扩大时依然能保持高效的性能提升。

虽然 Manzano 目前仍处于研究阶段,尚未直接应用于 iPhone 或 Mac 设备,但这表明苹果正在构建更强大的底层 AI 能力。

该媒体认为这项技术极有可能会被整合进未来的“图乐园 Image Playground”功能中,为用户带来更智能的修图体验和更具想象力的画面生成能力,进一步巩固苹果在端侧 AI 领域的竞争力。

IT之家附上参考地址

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
国足0-1塔吉克斯坦,产生5个事实:邵佳一接近下课,韦世豪输球输人

国足0-1塔吉克斯坦,产生5个事实:邵佳一接近下课,韦世豪输球输人

球场没跑道
2026-10-06 21:49:47
甘肃男孩买3瓶饮料共中奖71瓶,店主回应:借购物车给他们拉回家,之前没有中奖这么多瓶的

甘肃男孩买3瓶饮料共中奖71瓶,店主回应:借购物车给他们拉回家,之前没有中奖这么多瓶的

潇湘晨报
2026-10-06 10:24:16
以色列勒令英国30天内关闭驻耶路撒冷领事馆,英国媒体称:如果以色列关闭英国驻耶路撒冷领事馆,英国或将对等驱逐以色列驻英外交官

以色列勒令英国30天内关闭驻耶路撒冷领事馆,英国媒体称:如果以色列关闭英国驻耶路撒冷领事馆,英国或将对等驱逐以色列驻英外交官

吉刻新闻
2026-10-06 19:30:02
美国官员认为中国在2028年前“入侵”台湾的可能性正变得越来越低,外交部:台湾问题是中国内政,解决台湾问题完全是中国人自己的事

美国官员认为中国在2028年前“入侵”台湾的可能性正变得越来越低,外交部:台湾问题是中国内政,解决台湾问题完全是中国人自己的事

极目新闻
2026-10-06 20:11:17
国庆高速数据彻底打脸!油电大势已定,再也回不去了

国庆高速数据彻底打脸!油电大势已定,再也回不去了

华庭讲美食
2026-10-06 02:59:29
台湾媒体人谢寒冰点评蔡康永事件:他挺台独很多人都知道,但大陆愿意让它去

台湾媒体人谢寒冰点评蔡康永事件:他挺台独很多人都知道,但大陆愿意让它去

小徐讲八卦
2026-10-06 09:16:10
哈马斯高官:哈马斯加沙地带领导人阿穆迪在以色列暗杀行动中幸存

哈马斯高官:哈马斯加沙地带领导人阿穆迪在以色列暗杀行动中幸存

环球网资讯
2026-10-05 17:01:11
462亿元!华为宣布:高通收购华为美国专利,“韬定律”能卖钱了

462亿元!华为宣布:高通收购华为美国专利,“韬定律”能卖钱了

DeepAuto车探
2026-10-06 08:50:45
逼迫空姐下跪事件继续升级!网友点名道姓:这个欧某某,恐要喝西北风了,涉事某泰集团不会给他好果子吃

逼迫空姐下跪事件继续升级!网友点名道姓:这个欧某某,恐要喝西北风了,涉事某泰集团不会给他好果子吃

火山詩话
2026-10-06 10:10:29
一名美国女性被指在中国官员授意下监视赖清德之子,外交部回应

一名美国女性被指在中国官员授意下监视赖清德之子,外交部回应

政知新媒体
2026-10-06 20:10:17
国足队长韦世豪被罚下笑着离场!媒体人:定时炸弹 脑子仅葡萄干大小

国足队长韦世豪被罚下笑着离场!媒体人:定时炸弹 脑子仅葡萄干大小

念洲
2026-10-06 21:34:23
刚刚,诺贝尔物理奖爆冷!82岁狂人一人独揽,凿穿南极冰川

刚刚,诺贝尔物理奖爆冷!82岁狂人一人独揽,凿穿南极冰川

新智元
2026-10-06 18:52:40
江西一摩托车疑闯高速被收费站工作人员持电锯拦下,律师:工作人员不是公安民警,没有强制拦截的执法权,遇到强行闯卡车辆仅能拒绝通行

江西一摩托车疑闯高速被收费站工作人员持电锯拦下,律师:工作人员不是公安民警,没有强制拦截的执法权,遇到强行闯卡车辆仅能拒绝通行

芒果都市
2026-10-06 14:47:11
不敌当地竞争对手,7-11便利店退出印度

不敌当地竞争对手,7-11便利店退出印度

界面新闻
2026-10-06 20:53:26
托卡耶夫没有把话挑明,但他给了足够的暗示:要是俄罗斯总统不是普京坐镇,对欧洲来说才是真正的大麻烦

托卡耶夫没有把话挑明,但他给了足够的暗示:要是俄罗斯总统不是普京坐镇,对欧洲来说才是真正的大麻烦

人生录
2026-10-06 21:15:34
39岁德约第七次中网夺冠,书写奇迹的同时也是与中国球迷的双向奔赴

39岁德约第七次中网夺冠,书写奇迹的同时也是与中国球迷的双向奔赴

极目新闻
2026-10-06 22:40:18
“借运”比借寿更阴险!5样旧物,亲人送也别乱收

“借运”比借寿更阴险!5样旧物,亲人送也别乱收

阿天爱旅行
2026-10-05 00:36:21
完蛋!上场5分钟跟腱撕裂,赛季报销!恩比德这啥命啊

完蛋!上场5分钟跟腱撕裂,赛季报销!恩比德这啥命啊

老嗮说体育
2026-10-06 12:07:53
C罗长文回应退出训练:主教练两度食言;向葡萄牙人民道歉

C罗长文回应退出训练:主教练两度食言;向葡萄牙人民道歉

懂球帝
2026-10-07 02:44:51
韦世豪用1张红牌证明,邵佳一根本压不住他!贺炜一席话说得很重

韦世豪用1张红牌证明,邵佳一根本压不住他!贺炜一席话说得很重

足球大腕
2026-10-06 23:27:09
2026-10-07 03:15:00
IT之家
IT之家
爱科技,爱这里 - 前沿科技人气平台
371173文章数 607593关注度
往期回顾 全部

科技要闻

物理学奖揭晓!一位天体物理科学家独享

头条要闻

婚宴14道主菜上错7道 新郎父亲:亲友说菜太差 没面子

头条要闻

婚宴14道主菜上错7道 新郎父亲:亲友说菜太差 没面子

体育要闻

30天30队·雄鹿:没有扬尼斯,重新试错吧

娱乐要闻

身家千万独居的王曼昱,私底下有多壕

财经要闻

杨植麟断腕:Kimi的至暗时刻与远征

汽车要闻

智能化再提升 2027款东风标致、东风雪铁龙新车更人性化了

态度原创

游戏
本地
亲子
公开课
军事航空

临时工!PS两款3A大作免费领

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

亲子要闻

这哪里像是一个妈生的

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

也门政府军称收复红海港口城市穆哈

无障碍浏览 进入关怀版