网易首页 > 网易号 > 正文 申请入驻

苹果发布Pico-Banana-400K数据集,帮助训练AI图像编辑模型

0
分享至

IT之家 10 月 29 日消息,苹果公司发布了 Pico-Banana-400K,这是一个包含 40 万张图像的研究数据集,有趣的是,该数据集是利用谷歌的 Gemini-2.5 模型构建的

据IT之家了解,苹果的这个研究成果名为《Pico-Banana-400K:面向文本引导图像编辑的大规模数据集》(Pico-Banana-400K: A Large-Scale Dataset for Text-Guided Image Editing),该公司还发布了由此生成的包含 40 万张图像的完整数据集。该数据集采用非商业性研究许可(non-commercial research license)发布,意味着研究人员和学术机构可自由使用,但不得用于商业用途。

数月前,谷歌推出了 Gemini 2.5-Flash-Image 模型,也被称为 Nanon-Banana,该模型在图像编辑任务中表现出色,被广泛认为是当前最先进的图像编辑模型之一。尽管近年来多个模型在图像生成与编辑方面取得显著进展,苹果的研究团队指出:“尽管技术不断进步,开放研究仍受限于缺乏大规模、高质量且可完全共享的图像编辑数据集。现有数据集往往依赖专有模型生成的合成数据,或仅包含有限的人工筛选子集。此外,这些数据集普遍存在领域偏移(domain shifts)、编辑类型分布不均以及质量控制不一致等问题,严重阻碍了鲁棒图像编辑模型的发展。”

为解决这一瓶颈,苹果团队着手构建一个更全面、更具代表性的图像编辑数据集。

Pico-Banana-400K 的构建过程

研究团队首先从 OpenImages 数据集中选取了大量真实照片,确保涵盖人物、物体及含文字场景等多样化内容。


然后,团队设计了 35 种不同类型的图像修改指令,并将其归入八大类别,包括:

  • 像素与光度调整(Pixel & Photometric):如添加胶片颗粒或复古滤镜;
  • 以人为中心的编辑(Human-Centric):例如将人物转换为 Funko-Pop 风格的玩具形象;
  • 场景构成与多主体编辑(Scene Composition & Multi-Subject):如改变天气条件(晴天 / 雨天 / 雪天);
  • 对象级语义修改(Object-Level Semantic):如移动物体位置或调整空间关系;
  • 图像缩放(Scale):如放大画面(Zoom in)等。

接下来,研究人员会将一张原始图像连同一条编辑指令输入至 Nanon-Banana 模型进行图像编辑。生成结果随后交由 Gemini 2.5-Pro 模型进行自动评估,判断其是否准确遵循指令并具备良好视觉质量。只有通过双重验证的结果才会被纳入最终数据集。


Pico-Banana-400K 不仅包含单轮编辑(single-turn edits,即一次提示完成编辑)的样本,还涵盖了多轮连续编辑序列(multi-turn edit sequences),以及“偏好对”(preference pairs)—— 即成功与失败编辑结果的对比样本,帮助模型学习区分理想与不良输出。

尽管研究团队承认 Nanon-Banana 在精细空间控制、布局外推和文字排版处理方面仍存在局限,但他们强调,Pico-Banana-400K 的目标是为下一代文本引导图像编辑模型提供一个坚实、可复现的训练与评测基础。

目前,相关研究论文已发布于预印本平台 arXiv,而完整的 Pico-Banana-400K 数据集也已在 GitHub 上向全球研究者免费开放。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
医生劝告:一旦吃上降压药,这5种食物必须戒掉,再吃有中风风险

医生劝告:一旦吃上降压药,这5种食物必须戒掉,再吃有中风风险

医学原创故事会
2025-11-07 23:58:06
准备重建,ESPN:独行侠未来几个月将探索浓眉的市场行情

准备重建,ESPN:独行侠未来几个月将探索浓眉的市场行情

懂球帝
2025-11-12 08:30:09
33岁时是秋收起义参谋长,53岁时却成为俘虏,陈赓求情:请优待他

33岁时是秋收起义参谋长,53岁时却成为俘虏,陈赓求情:请优待他

大运河时空
2025-11-11 13:25:03
1955年一老人看十大元帅授衔,感叹道:若跟对人,我就是元帅之首

1955年一老人看十大元帅授衔,感叹道:若跟对人,我就是元帅之首

谈古论今历史有道
2025-11-12 17:40:03
彭德怀强闯毛主席三道门哽咽落泪,周恩来许诺:一定帮你解决困难

彭德怀强闯毛主席三道门哽咽落泪,周恩来许诺:一定帮你解决困难

大运河时空
2025-11-11 18:05:03
今日金价:大家要有心理准备了,下周,金价或将重现13年历史

今日金价:大家要有心理准备了,下周,金价或将重现13年历史

蓝色海边
2025-11-12 04:27:16
国台办回应苏起呼吁两岸交流

国台办回应苏起呼吁两岸交流

界面新闻
2025-11-12 10:31:13
急了!日本前自卫队员向我国使馆抗议:你们是最不受欢迎的国家

急了!日本前自卫队员向我国使馆抗议:你们是最不受欢迎的国家

荷兰豆爱健康
2025-11-12 11:47:30
心梗去世的人飙升!医生含泪苦劝:无论多大年纪,天冷坚守7原则

心梗去世的人飙升!医生含泪苦劝:无论多大年纪,天冷坚守7原则

王二哥老搞笑
2025-11-09 00:18:07
蔡正元暴露真面目,大陆官媒正式定性,又有一人对蔡正元开火

蔡正元暴露真面目,大陆官媒正式定性,又有一人对蔡正元开火

博览历史
2025-11-11 17:40:02
全运男篮第一合同没了!周琦600万包含夺冠奖金 最低目标为第三名

全运男篮第一合同没了!周琦600万包含夺冠奖金 最低目标为第三名

狼叔评论
2025-11-11 20:14:04
虽然毛主席享年83岁,保健医生却说:其实毛主席不具备长寿条件

虽然毛主席享年83岁,保健医生却说:其实毛主席不具备长寿条件

刘哥谈体育
2025-11-12 09:18:23
卡地亚晚宴明星站位曝地位:那英、郭晶晶靠边站,C位实至名归

卡地亚晚宴明星站位曝地位:那英、郭晶晶靠边站,C位实至名归

查尔菲的笔记
2025-11-10 16:06:40
同样是武术演员,谢苗登上全运会舞台,和释小龙走上了不一样的路

同样是武术演员,谢苗登上全运会舞台,和释小龙走上了不一样的路

查尔菲的笔记
2025-11-11 18:05:19
A股:普跌收市,逾3563股下跌!不出意外,周四大盘还会下跌?

A股:普跌收市,逾3563股下跌!不出意外,周四大盘还会下跌?

虎哥闲聊
2025-11-12 15:08:18
福建舰入列效果立竿见影!联合国安理会现名场面,美国学会了含蓄

福建舰入列效果立竿见影!联合国安理会现名场面,美国学会了含蓄

博览历史
2025-11-11 15:59:37
省委副书记家中被盗,他引起中央关注,从此平步青云受重用

省委副书记家中被盗,他引起中央关注,从此平步青云受重用

优趣纪史记
2025-11-11 19:17:42
中国脑梗发病率世界第一!提醒:罪魁祸首已揪出,3种蔬菜要少吃

中国脑梗发病率世界第一!提醒:罪魁祸首已揪出,3种蔬菜要少吃

徐云流浪中国
2025-11-09 16:43:07
游戏竟成救命稻草?男子辞去工作照顾病母,靠搬砖硬核养家糊口

游戏竟成救命稻草?男子辞去工作照顾病母,靠搬砖硬核养家糊口

17173游戏网
2025-11-11 16:36:32
意外!他下赛季可能成申花主力阵容唯一的80后,表现已获得认可

意外!他下赛季可能成申花主力阵容唯一的80后,表现已获得认可

两兄弟养牛
2025-11-12 17:46:44
2025-11-12 19:00:49
IT之家
IT之家
爱科技,爱这里 - 前沿科技人气平台
314776文章数 606742关注度
往期回顾 全部

科技要闻

前阿里人亲述: “经济上行”期双11什么样

头条要闻

美特斯邦威被指拖欠184万广告费 广告公司:真没办法了

头条要闻

美特斯邦威被指拖欠184万广告费 广告公司:真没办法了

体育要闻

消磨你上千小时的足球游戏,走过第20年

娱乐要闻

再王珞丹和白百何 明白两人"差别"在哪

财经要闻

段永平最新访谈:聊企业经营 投资理念

汽车要闻

7座皆独立座椅/新增5座版 体验第三代吉利豪越L

态度原创

手机
游戏
艺术
本地
公开课

手机要闻

OPPO Reno15星光蝴蝶结图赏:甜酷辣妹必备的小直屏

苦等数年!《永恒之塔2》领衔,盘点G-STAR 2025值得关注的游戏

艺术要闻

毛主席珍贵签名照曝光,鲜为人知的历史瞬间!

本地新闻

云游安徽 | 凌滩玉魄淬千年,诗意钢城马鞍山

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版