网易首页 > 网易号 > 正文 申请入驻

Gemini 3.5 Flash登上安卓编程榜单,但成本高出3倍且性能更慢

0
分享至

谷歌近期发布了新一期基准测试结果,对各主流AI模型在安卓编程领域的表现进行了横向对比,并公布了每个模型的Token使用成本。测试结果显示,谷歌自家的Gemini 3.5 Flash在安卓开发中资源消耗最为突出,甚至未能跻身前五名。


随着通用聊天机器人的热度逐渐降温,谷歌、OpenAI、Anthropic等公司纷纷将重心转向具备编程能力的智能体模型。用户也开始依赖这类模型进行"氛围编程"——即将大部分软件开发工作交由大语言模型来完成。

近几个月来,各模型在安卓编程方面的能力均有显著提升,谷歌也持续追踪并记录各模型的表现。"Android Bench"基准测试会随谷歌新模型的发布而更新,例如此次纳入了最新的Gemini 3.5 Flash,并将其与竞品进行对比。

该测试的核心评估方式是:每个模型在10次运行中成功解决安卓编程问题的百分比,满分为100分。谷歌还列出了预期表现及最近一次测试日期,部分高分模型的数据甚至可追溯至今年2月。

在最新一期的Android Bench排名中,结果令人意外。Gemini 3.5 Flash仅排名第六,落后于GPT 5.5以及早在今年2月就完成测试的Gemini 3.1 Pro Preview。

Gemini 3.5 Flash此前被定位为比Gemini 3.1 Pro更廉价、更快速的替代方案,官方预期性能差距为6.1%。然而最新基准测试结果却给出了不同的结论:在安卓开发场景下,Gemini 3.5 Flash不仅延迟更高,任务成功率也低了9个百分点。

更关键的是成本对比——谷歌这款最新模型在单次基准测试中平均消耗355.9个Token,花费约147.1美元;而Gemini 3.1 Pro Preview仅消耗73.3个Token,费用约为前者的三分之一。

当然,需要指出的是,谷歌目前在榜单上列出的仍是Gemini 3.1 Pro的预览版本。但即便如此,这款预览版模型的得分依然高于一款被官方宣传为"更快、更高效"的正式版模型,这一结果颇为耐人寻味。

GPT 5.5在单次运行成本上与Gemini 3.5 Flash相近,但后者在Android Bench测试中的Token消耗量是前者的5.5倍。Anthropic的上一代模型Claude Opus 4.7排名第四,运行成本和Token用量略低,处于中游水平。目前谷歌尚未公布Opus 4.8或Fable 5的基准测试得分。

以下是谷歌在最新一期Android Bench中公布的前十名模型排名:

榜单中既有多款开放权重模型,也包含Claude、GPT等知名闭源模型。与上一期相比,榜单前段的排名基本保持不变,唯一的调整是GPT 5.3 Codex已从名单中移除。

完整排名可在谷歌官方网站上查阅。

谷歌会随着更多模型完成测试而定期更新该榜单。从整体来看,这份榜单是衡量各模型在安卓开发领域表现的可靠参考。Gemini 3.5 Flash在其他大语言模型及智能体任务中确实表现出色,尽管谷歌对其成本和使用上限有所调整,但其在安卓编程方面的短板同样不容忽视。

Q&A

Q1:Android Bench是什么?谷歌用它来评估什么?

A:Android Bench是谷歌发布的一项基准测试,专门用于评估各主流AI模型在安卓编程领域的表现。每个模型会经历10次运行,以成功解决安卓编程问题的百分比作为得分,满分为100分。谷歌会随新模型发布持续更新榜单,同时公布每个模型的Token使用量及对应成本,帮助开发者选择最适合安卓开发场景的AI模型。

Q2:Gemini 3.5 Flash在Android Bench中表现如何?

A:Gemini 3.5 Flash在最新一期Android Bench中仅排名第六,不仅未能进入前五,还落后于更早测试的Gemini 3.1 Pro Preview。其单次基准测试平均消耗355.9个Token,花费约147.1美元,是Gemini 3.1 Pro Preview成本的约3倍,同时任务成功率还低了9个百分点,延迟也更高,在安卓编程场景中性价比表现欠佳。

Q3:目前Android Bench排名靠前的AI模型有哪些?

A:根据谷歌最新公布的Android Bench榜单,排名靠前的模型包括GPT 5.5、Gemini 3.1 Pro Preview等闭源模型,以及多款开放权重模型。Claude Opus 4.7排名第四,Token消耗和运行成本处于中游水平。与上一期相比,榜单前段排名基本稳定,主要变化是GPT 5.3 Codex已从榜单中移除。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
这个30岁的小姑娘能有多好色?2016年,女子趁着丈夫在外打工偷情,还玩角色扮演,最终却被小三杀害

这个30岁的小姑娘能有多好色?2016年,女子趁着丈夫在外打工偷情,还玩角色扮演,最终却被小三杀害

法网恢恢
2026-08-07 12:39:43
58岁日本籍主帅神了:率中国男足连胜4支欧美强队,强势晋级决赛

58岁日本籍主帅神了:率中国男足连胜4支欧美强队,强势晋级决赛

侧身凌空斩
2026-08-07 21:39:46
委内瑞拉有20万华人,但最令人惊讶的是:这20万人里,竟有九成左右都来自同一个县城

委内瑞拉有20万华人,但最令人惊讶的是:这20万人里,竟有九成左右都来自同一个县城

背包旅行
2026-08-06 10:09:09
WTT日本冠军赛:国乒8月8日赛程公布,即将迎战早田希娜&朱雨玲

WTT日本冠军赛:国乒8月8日赛程公布,即将迎战早田希娜&朱雨玲

乒谈
2026-08-07 23:57:10
曾经的古装男神郑国霖在景区当NPC,40度高温下穿20斤龙袍

曾经的古装男神郑国霖在景区当NPC,40度高温下穿20斤龙袍

追影客栈
2026-08-07 14:41:13
浙江广厦8分惜败!新赛季开门黑,李金效回归首秀11分,吴骁9分

浙江广厦8分惜败!新赛季开门黑,李金效回归首秀11分,吴骁9分

体坛瞎白话
2026-08-07 19:02:19
中国深夜通告全球,次日准时出兵,菲方没料到我军歼-10也来了

中国深夜通告全球,次日准时出兵,菲方没料到我军歼-10也来了

叹为观止易
2026-08-04 08:25:47
国家出手抓的4位首富,坑害百姓、罪行恶劣,个个不值得原谅

国家出手抓的4位首富,坑害百姓、罪行恶劣,个个不值得原谅

历史人文2
2026-08-07 17:51:42
一旦起飞就意味开战,不加油可绕地球飞80圈,连美国也不敢击落

一旦起飞就意味开战,不加油可绕地球飞80圈,连美国也不敢击落

蜉蝣说
2026-08-06 10:10:43
泉州市委书记张毅恭,任上被查

泉州市委书记张毅恭,任上被查

上观新闻
2026-08-07 19:21:31
比亚迪可变磁通电机量产,高速续航迎来提升!

比亚迪可变磁通电机量产,高速续航迎来提升!

侃故事的阿庆
2026-08-07 10:21:01
曝韩国足协性贿赂裁判,涉及中国队比赛!

曝韩国足协性贿赂裁判,涉及中国队比赛!

扬子晚报
2026-08-07 12:58:56
百万车评女网红, 被老公在媒体群曝光出轨, 深夜牵手男性, 哨兵模式拍下立大功!

百万车评女网红, 被老公在媒体群曝光出轨, 深夜牵手男性, 哨兵模式拍下立大功!

扮猫骑老虎
2026-08-05 17:42:57
密春雷被判后董卿近况曝光,王丽坤前夫落网,豪门梦一场空

密春雷被判后董卿近况曝光,王丽坤前夫落网,豪门梦一场空

子芫伴你成长
2026-08-05 22:51:57
外资撤离印度越南?美媒大胆预言:中国的西部,将成新世界工厂

外资撤离印度越南?美媒大胆预言:中国的西部,将成新世界工厂

铭记历史呀
2026-08-07 16:26:21
我国超3亿人患糖尿病?医生呼吁:停止食用“5物”,保护胰岛

我国超3亿人患糖尿病?医生呼吁:停止食用“5物”,保护胰岛

任医生聊健康
2026-07-09 12:00:29
伊朗总统:最高领袖穆杰塔巴决策过程遭人利用

伊朗总统:最高领袖穆杰塔巴决策过程遭人利用

澎湃新闻
2026-08-06 19:31:46
1982 年,飞行员黄植诚和马红成婚,8 年后她借出国名义在美国失联。安保人员搜查住所,卧室内查获的物件让人震惊

1982 年,飞行员黄植诚和马红成婚,8 年后她借出国名义在美国失联。安保人员搜查住所,卧室内查获的物件让人震惊

磊子讲史
2026-07-15 12:02:40
贾浅浅老公被“扒”了个底朝天 贾平凹当年看中的女婿 现在成啥样?

贾浅浅老公被“扒”了个底朝天 贾平凹当年看中的女婿 现在成啥样?

社会日日鲜
2026-08-07 11:00:11
圈内顶流情侣悄默声分手?双方团队集体装哑,全网蹲一个实锤!

圈内顶流情侣悄默声分手?双方团队集体装哑,全网蹲一个实锤!

乡野小珥
2026-08-08 06:11:12
2026-08-08 07:16:49
至顶科技 incentive-icons
至顶科技
科技产业媒体与 AI 产业服务机构
20782文章数 49726关注度
往期回顾 全部

科技要闻

突然涨价,"只收电费钱"的梁文锋,变了吗

头条要闻

2岁患儿就诊死亡首诊医生获刑 不少医生为其鸣不平

头条要闻

2岁患儿就诊死亡首诊医生获刑 不少医生为其鸣不平

体育要闻

去年信誓旦旦3000万 今年NBA查无此人

娱乐要闻

周也热恋结束,六个字暴露单身状态

财经要闻

腾讯WorkBuddy领跑AI办公 阿里字节急了?

汽车要闻

越7全球首秀 传祺开始进攻方盒子越野

态度原创

艺术
本地
教育
房产
公开课

艺术要闻

别人画皮他画魂,这个在修道院关了18年的男人,把每一具肉体都画成了圣像

本地新闻

课本里的童年,绍兴正上演

教育要闻

高校淘汰文科专业!对“青椒”的冲击严重…

房产要闻

单日狂卖35亿!两大央企重仓,三亚土拍又爆了!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版