苹果发布Pico-Banana-400K数据集,帮助训练AI图像编辑模型
创始人
2025-10-29 12:40:36
0

IT之家 10 月 29 日消息,苹果公司发布了 Pico-Banana-400K,这是一个包含 40 万张图像的研究数据集,有趣的是,该数据集是利用谷歌的 Gemini-2.5 模型构建的

据IT之家了解,苹果的这个研究成果名为《Pico-Banana-400K:面向文本引导图像编辑的大规模数据集》(Pico-Banana-400K: A Large-Scale Dataset for Text-Guided Image Editing),该公司还发布了由此生成的包含 40 万张图像的完整数据集。该数据集采用非商业性研究许可(non-commercial research license)发布,意味着研究人员和学术机构可自由使用,但不得用于商业用途。

数月前,谷歌推出了 Gemini 2.5-Flash-Image 模型,也被称为 Nanon-Banana,该模型在图像编辑任务中表现出色,被广泛认为是当前最先进的图像编辑模型之一。尽管近年来多个模型在图像生成与编辑方面取得显著进展,苹果的研究团队指出:“尽管技术不断进步,开放研究仍受限于缺乏大规模、高质量且可完全共享的图像编辑数据集。现有数据集往往依赖专有模型生成的合成数据,或仅包含有限的人工筛选子集。此外,这些数据集普遍存在领域偏移(domain shifts)、编辑类型分布不均以及质量控制不一致等问题,严重阻碍了鲁棒图像编辑模型的发展。”

为解决这一瓶颈,苹果团队着手构建一个更全面、更具代表性的图像编辑数据集。

Pico-Banana-400K 的构建过程

研究团队首先从 OpenImages 数据集中选取了大量真实照片,确保涵盖人物、物体及含文字场景等多样化内容。

然后,团队设计了 35 种不同类型的图像修改指令,并将其归入八大类别,包括:

  • 像素与光度调整(Pixel & Photometric):如添加胶片颗粒或复古滤镜;
  • 以人为中心的编辑(Human-Centric):例如将人物转换为 Funko-Pop 风格的玩具形象;
  • 场景构成与多主体编辑(Scene Composition & Multi-Subject):如改变天气条件(晴天 / 雨天 / 雪天);
  • 对象级语义修改(Object-Level Semantic):如移动物体位置或调整空间关系;
  • 图像缩放(Scale):如放大画面(Zoom in)等。

接下来,研究人员会将一张原始图像连同一条编辑指令输入至 Nanon-Banana 模型进行图像编辑。生成结果随后交由 Gemini 2.5-Pro 模型进行自动评估,判断其是否准确遵循指令并具备良好视觉质量。只有通过双重验证的结果才会被纳入最终数据集。

Pico-Banana-400K 不仅包含单轮编辑(single-turn edits,即一次提示完成编辑)的样本,还涵盖了多轮连续编辑序列(multi-turn edit sequences),以及“偏好对”(preference pairs)—— 即成功与失败编辑结果的对比样本,帮助模型学习区分理想与不良输出。

尽管研究团队承认 Nanon-Banana 在精细空间控制、布局外推和文字排版处理方面仍存在局限,但他们强调,Pico-Banana-400K 的目标是为下一代文本引导图像编辑模型提供一个坚实、可复现的训练与评测基础。

目前,相关研究论文已发布于预印本平台 arXiv,而完整的 Pico-Banana-400K 数据集也已在 GitHub 上向全球研究者免费开放。

相关内容

热门资讯

海尔取得锁具专利,解决锁芯盖易... 国家知识产权局信息显示,青岛海尔智能家电科技有限公司取得一项名为“锁具”的专利,授权公告号CN224...
2026世界智能产业博览会开幕...   这是5月28日拍摄的2026世界智能产业博览会现场。新华社记者 赵子硕 摄   新华社天津5月2...
专业Vlog拍摄手机推荐 谁是... 对于专业Vlogger和视频创作者而言,一部手机不仅是通讯工具,更是生产力核心。在2026年,随着手...
喜闻乐见建工取得双层耦合式减振... 国家知识产权局信息显示,喜闻乐见建工集团有限公司取得一项名为“一种双层耦合式减振降噪隔声窗”的专利,...
互旺达热能取得建筑给排水防结霜... 国家知识产权局信息显示,陕西互旺达热能有限公司取得一项名为“一种建筑给排水防结霜管道”的专利,授权公...
1年期≠2个半年期任务累加 专... 本文转自【央视新闻客户端】; 神舟二十一号乘组太空出差7个月,刷新了中国航天员乘组在轨驻留最长纪录,...
【活动回顾】第九期悦享会“算法... 第九期“悦享会” 5月19日晚上,第九期悦享会“算法之外-遇见自己”读书分享会在番禺校区图书馆二楼...
有了最新消息!玖游卡五星辅助&... 有了最新消息!玖游卡五星辅助"都是确实有辅助攻略"(哔哩哔哩)1、实时玖游卡五星辅助透视辅助更新:用...
网友热议!葫芦娃七子连心攻略&... 网友热议!葫芦娃七子连心攻略"好像真的是有辅助神器"(哔哩哔哩)葫芦娃七子连心攻略透视方法中分为三种...
出现新变化!传送屋高仿版辅助&... 出现新变化!传送屋高仿版辅助"果然是有辅助方法"(哔哩哔哩)1、打开软件启动之后找到中间准星的标志长...