网易首页 > 网易号 > 正文 申请入驻

苹果发布Pico-Banana-400K数据集,帮助训练AI图像编辑模型

0
分享至

IT之家 10 月 29 日消息,苹果公司发布了 Pico-Banana-400K,这是一个包含 40 万张图像的研究数据集,有趣的是,该数据集是利用谷歌的 Gemini-2.5 模型构建的

据IT之家了解,苹果的这个研究成果名为《Pico-Banana-400K:面向文本引导图像编辑的大规模数据集》(Pico-Banana-400K: A Large-Scale Dataset for Text-Guided Image Editing),该公司还发布了由此生成的包含 40 万张图像的完整数据集。该数据集采用非商业性研究许可(non-commercial research license)发布,意味着研究人员和学术机构可自由使用,但不得用于商业用途。

数月前,谷歌推出了 Gemini 2.5-Flash-Image 模型,也被称为 Nanon-Banana,该模型在图像编辑任务中表现出色,被广泛认为是当前最先进的图像编辑模型之一。尽管近年来多个模型在图像生成与编辑方面取得显著进展,苹果的研究团队指出:“尽管技术不断进步,开放研究仍受限于缺乏大规模、高质量且可完全共享的图像编辑数据集。现有数据集往往依赖专有模型生成的合成数据,或仅包含有限的人工筛选子集。此外,这些数据集普遍存在领域偏移(domain shifts)、编辑类型分布不均以及质量控制不一致等问题,严重阻碍了鲁棒图像编辑模型的发展。”

为解决这一瓶颈,苹果团队着手构建一个更全面、更具代表性的图像编辑数据集。

Pico-Banana-400K 的构建过程

研究团队首先从 OpenImages 数据集中选取了大量真实照片,确保涵盖人物、物体及含文字场景等多样化内容。


然后,团队设计了 35 种不同类型的图像修改指令,并将其归入八大类别,包括:

  • 像素与光度调整(Pixel & Photometric):如添加胶片颗粒或复古滤镜;
  • 以人为中心的编辑(Human-Centric):例如将人物转换为 Funko-Pop 风格的玩具形象;
  • 场景构成与多主体编辑(Scene Composition & Multi-Subject):如改变天气条件(晴天 / 雨天 / 雪天);
  • 对象级语义修改(Object-Level Semantic):如移动物体位置或调整空间关系;
  • 图像缩放(Scale):如放大画面(Zoom in)等。

接下来,研究人员会将一张原始图像连同一条编辑指令输入至 Nanon-Banana 模型进行图像编辑。生成结果随后交由 Gemini 2.5-Pro 模型进行自动评估,判断其是否准确遵循指令并具备良好视觉质量。只有通过双重验证的结果才会被纳入最终数据集。


Pico-Banana-400K 不仅包含单轮编辑(single-turn edits,即一次提示完成编辑)的样本,还涵盖了多轮连续编辑序列(multi-turn edit sequences),以及“偏好对”(preference pairs)—— 即成功与失败编辑结果的对比样本,帮助模型学习区分理想与不良输出。

尽管研究团队承认 Nanon-Banana 在精细空间控制、布局外推和文字排版处理方面仍存在局限,但他们强调,Pico-Banana-400K 的目标是为下一代文本引导图像编辑模型提供一个坚实、可复现的训练与评测基础。

目前,相关研究论文已发布于预印本平台 arXiv,而完整的 Pico-Banana-400K 数据集也已在 GitHub 上向全球研究者免费开放。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
河北体彩辟谣“廊坊7397万巨奖得主买彩票时衣着怪异”:系山西某彩票站的监控录像

河北体彩辟谣“廊坊7397万巨奖得主买彩票时衣着怪异”:系山西某彩票站的监控录像

潇湘晨报
2025-11-13 18:22:22
委内瑞拉军方:全面进入作战准备状态,击落一架敌对飞行器

委内瑞拉军方:全面进入作战准备状态,击落一架敌对飞行器

政知新媒体
2025-11-13 08:15:31
狗咬邻居被摔死后主人上门打砸遭反杀,邻居以故意伤害罪被公诉,案件一审将开庭

狗咬邻居被摔死后主人上门打砸遭反杀,邻居以故意伤害罪被公诉,案件一审将开庭

扬子晚报
2025-11-12 19:59:31
高市早苗通知全球,不撤回涉台言论,话音刚落,解放军攻击11亮相

高市早苗通知全球,不撤回涉台言论,话音刚落,解放军攻击11亮相

谛听骨语本尊
2025-11-13 16:10:40
一条狗引发的命案后续:案发当晚视频曝光,律师透露一审重大进展

一条狗引发的命案后续:案发当晚视频曝光,律师透露一审重大进展

吭哧有力
2025-11-13 15:13:22
血腥且残酷,库尔斯克之战重演了

血腥且残酷,库尔斯克之战重演了

中国新闻周刊
2025-11-13 17:55:52
驻日大使馆又更新了,这次直接用“倭寇”二字,意思已很明显了!

驻日大使馆又更新了,这次直接用“倭寇”二字,意思已很明显了!

青青子衿
2025-11-13 17:22:37
刚刚!阿里,突发!直线爆拉!

刚刚!阿里,突发!直线爆拉!

中国基金报
2025-11-13 16:04:05
81岁林豆豆现状:已退休23年,独居在北京老房子,用阅读打发时间

81岁林豆豆现状:已退休23年,独居在北京老房子,用阅读打发时间

揽星河的笔记
2025-11-12 12:36:17
燕梳楼:如果日本驱逐薛剑,就是向中国宣战!

燕梳楼:如果日本驱逐薛剑,就是向中国宣战!

燕梳楼频道
2025-11-13 12:44:36
传播煽动分裂国家言论,充当“台独”打手帮凶 起底台湾网红温子渝陈柏源

传播煽动分裂国家言论,充当“台独”打手帮凶 起底台湾网红温子渝陈柏源

上游新闻
2025-11-13 15:19:04
泪崩了!网传两小伙来大连打工,被老板辞退后,在楼梯间借宿一宿

泪崩了!网传两小伙来大连打工,被老板辞退后,在楼梯间借宿一宿

火山诗话
2025-11-13 12:05:26
细思极恐!三聚氰胺悄悄回来了?

细思极恐!三聚氰胺悄悄回来了?

徐德文科学频道
2025-11-12 18:56:28
单打四强全产生,王曼昱陈梦恶战,孙颖莎迎黑马

单打四强全产生,王曼昱陈梦恶战,孙颖莎迎黑马

篮球国度
2025-11-13 08:54:44
我家狗比你家人值钱:狗咬人被摔死,狗主人带9人破门而入遭反杀

我家狗比你家人值钱:狗咬人被摔死,狗主人带9人破门而入遭反杀

汉史趣闻
2025-11-13 09:00:16
中日两国必有一战,谁也无法调和,谁也无法阻挡中华民族统一大业

中日两国必有一战,谁也无法调和,谁也无法阻挡中华民族统一大业

易玄
2025-11-13 06:25:22
12条猎犬围捕400斤大野猪时4条不幸牺牲,损失3万余元,护农队:今年已有33条猎犬牺牲,总价值上百万元

12条猎犬围捕400斤大野猪时4条不幸牺牲,损失3万余元,护农队:今年已有33条猎犬牺牲,总价值上百万元

极目新闻
2025-11-13 19:51:51
王鹤棣2cm的瓜重出江湖!

王鹤棣2cm的瓜重出江湖!

八卦疯叔
2025-11-13 10:34:09
震惊!北大研究发现,男性每增加一个亲生子女,死亡风险降低4%

震惊!北大研究发现,男性每增加一个亲生子女,死亡风险降低4%

火山诗话
2025-11-13 11:37:14
离婚1年后,浙江29岁CEO现身相亲市场,被吐槽惨了!公司年营业额过亿

离婚1年后,浙江29岁CEO现身相亲市场,被吐槽惨了!公司年营业额过亿

鲁中晨报
2025-11-13 20:27:06
2025-11-13 21:12:49
IT之家
IT之家
爱科技,爱这里 - 前沿科技人气平台
314977文章数 606746关注度
往期回顾 全部

科技要闻

深夜重磅!GPT-5.1发布,奥特曼大谈情商

头条要闻

缅北园区头目佘智江被押解回国:登机前微笑 下机腿软

头条要闻

缅北园区头目佘智江被押解回国:登机前微笑 下机腿软

体育要闻

跟豪门传了十年绯闻,他却偏要“择一队终老”

娱乐要闻

王鹤棣孟子义真要搭?

财经要闻

源峰25亿赌局!汉堡王中国"卖身"求生

汽车要闻

具备高阶辅助驾驶功能 欧拉5预售价10.98万起

态度原创

游戏
亲子
旅游
健康
家居

《幻兽帕鲁》手游封测12月开启 绝地求生开发商打造

亲子要闻

何穗产后首晒照,网友:这是刚生完的人吗?

旅游要闻

四川首个秋假 绵阳景点成为小游客科考研学热门之选

血液科专家揭秘白血病七大误区

家居要闻

莫奈时间 重构先锋概念

无障碍浏览 进入关怀版