网易首页 > 网易号 > 正文 申请入驻

Gemini手搓3D粒子特效,体验现实版钢铁侠

0
分享至


新智元报道

编辑:定慧

【新智元导读】无需懂一行代码,Gemini 3正在重塑3D交互创作的边界!详细对比了Canvas与AI Studio在开发场景下的独特优势,带你亲身体验这场「零门槛」的3D交互革命。

Gemini 3的威力其实并没有被很多人真正的意识到。

最近,el.cine演示了如何仅通过简单的提示词,生成一个实时交互的3D粒子系统。


用户可以通过摄像头检测双手张合的手势来直接控制粒子群的缩放和扩散。

用同款提示词在Gemini Canvas试了一下,简直惊掉了下巴。


还可以升级,现在是识别一只手,可以识别两只手,把粒子完全分开。



完全就是AR级别的控制效果,感觉我就是钢铁侠本侠。


提示词非常简单:

提示:使用Three.js创建一个实时交互的3D粒子系统。

要求:

1、通过摄像头检测双手的张合与握紧,控制粒子群的缩放与扩散。

2、提供可选择心形/花朵/土星/佛像/烟花等模板的。

3、面板支持通过颜色选择器调整粒子颜色粒子。

4、需实时响应手势变化,界面设计简洁现代界面设计简洁现代。

整个过程完全无需编程基础,只需在Gemini中输入提示词即可。

这一成果不仅震惊了有经验的程序员(他们曾需花费数周学习GLSL着色器),更标志着复杂3D交互内容的创作门槛被彻底消除,被认为是正在见证的历史性时刻。

而且这个效果,只有Gemini能够「直出」这个效果。

就连谷歌AI Studio自带的Build也不能一次性跑出这么好的结果。


然后Gemini里自带的Canvas,还自带了控制台和代码Fix。

这还要什么Cursor!


第一次跑就这个结果,我以为大家都是这样,然后用了其他几个AI工具。

都没有Gemini跑出来的惊艳。


甚至有些直接就无法使用。


作者原来的例子效果也看起来要好一点。(怀疑是进行了多轮对话以后的结果)


被低估的Canvas

其实很多人还是低估了Canvas的威力了。

比如你想裁剪最近很流行的表情包。

如果直接使用Nano Banana Pro去截图,往往有种「大炮打蚊子」的感觉。

但是如果你先用Canvas做一个截图小工具,甚至还可以选择几行几列的截图,最后还能打包好后下载为zip压缩包。


Canvas是集成在Gemini网页版中的一个功能界面,对标的是OpenAI的Canvas和Anthropic的Artifacts。

核心机制:侧边栏的独立渲染

在传统的ChatGPT界面中,代码和文本是混在对话流里的。如果你想修改一段生成的代码,通常需要「复制-粘贴-修改-再粘贴」。

Canvas的逻辑是:将「对话(Chat)」与「内容(Content)」分离。

左侧:你的对话指令区。

右侧:一个独立的编辑器/渲染器窗口。

Canvas的三大技术杀手锏

这次3D粒子系统之所以能跑通,Canvas的功劳占了一半:

HTML/JS/React实时渲染环境:Canvas就像在浏览器里内置了一个轻量级的IDE。它不仅能显示代码,还能直接运行前端代码。对于WebGL(如Three.js)这种依赖浏览器环境的库,Canvas提供了原生的执行沙箱,这使得调用摄像头(WebcamAPI)变得非常顺滑,而不需要像以前那样把代码复制到本地服务器运行。

针对性的代码修复(FixButton):不同于普通的「重新生成」,Canvas允许你高亮右侧的一段代码或文本,然后告诉AI:「把这里的逻辑改一下」。它只针对局部进行微调,而不是重写全文。这对于调试复杂的3D渲染逻辑至关重要。

多模态的即时反馈:它支持生成图表、网页原型、文档。当你输入「把背景改成黑色」时,右侧的Canvas是实时刷新的,这种低延迟的反馈循环大大降低了试错成本。

适用人群:产品经理、前端设计师、数据分析师、轻量级代码编写者。

被低估的AI Studio

而另一个更被低估的就是AI Studio,AI Studio可以说是开发者的「核武库」。

如果说Canvas是装修精美的样板间,那么谷歌AIStudio就是堆满工具和原材料的施工现场。

它是目前访问Gemini API最快、最直接的路径。

核心定位:模型调试与Prompt Engineering

AI Studio不是为了让你聊天,而是为了让你构建应用

之前的例子中提到AI Studio的Build功能跑分不如Gemini Canvas,这其实是因为两者的侧重点不同。

AI Studio的硬核特性:

超长上下文(Context Window):这是AI Studio的杀手锏。

它支持Gemini 1.5 Pro的200万token上下文。你可以把整本技术文档、几小时的视频、或者整个项目的代码库直接拖进去。


  • 对比Canvas:Canvas的上下文虽然也长,但为了响应速度做了截断和优化;AI Studio则是「生吞」海量数据。


System Instructions(系统指令):在AI Studio里,你可以设置通过「系统指令」来定义模型的角色、语气和输出格式。这比在聊天框里说「你现在是一个xxx」要稳定得多,权重更高。

多模态原生输入:你可以上传一段40分钟的视频,AI Studio不会将其转化为文本字幕,而是直接「看」视频的每一帧。这对于视频理解、音频分析任务是降维打击。

Prompt Caching(提示词缓存):对于开发者来说,这能极大降低API调用成本和延迟。如果你的Prompt有一部分是固定的(比如一本巨大的规则书),AI Studio允许你缓存这部分内容。

适用人群:能够写Python/Node.js的开发者、企业级应用构建者、需要处理海量数据的研究人员。

而且官方给出了很多高质量的Vibe Coding作品库。

案例很多:

  • 涵盖了近100多种Vibe Coding作品;

  • 包含图像生成、视频创作、游戏开发、文本处理、代码生成等多领域;

  • 都是些很惊艳的范例:如漫画生成器、电商产品摄影棚、像素艺术场景生成、YT视频转互动学习应用。


比如可以在网页里玩跑酷。


或者在网页中生成4K高清壁纸。


还有很多例子,都是非常棒的Vibe Coding模板。

不过为什么上面那个粒子效果AI Studio不如Canvas呢?

大概猜一下,这涉及到底层的运行环境策略


  1. Canvas的优化目标是「一次性交付」:

    谷歌对Canvas模式下的模型进行了微调(Fine-tuning),强化了它生成完整、可运行的前端代码的能力,并自动补全了许多 Web 环境下的依赖库。

  2. AIStudio的环境更「裸」:

    AI Studio的预览功能主要是为了测试 API 的输出,它的沙箱环境并没有像 Canvas 那样针对流行的前端库(如 Three.js, React, Tailwind)做极致的预加载和兼容性优化。


最后,简单总结就是:

如果你想要一个结果(比如一个能玩的 3D 网页),用Gemini Canvas

如果你想要基于这个结果开发一个APP(比如获取它的 API 调用逻辑,集成到你自己的服务器),用AIStudio

想要体验上述粒子效果可以把下面代码拷贝到HTML单文件中,用浏览器打开即可。

html>

参考资料:

https://aistudio.google.com/apps

秒追ASI

⭐点赞、转发、在看一键三连⭐

点亮星标,锁定新智元极速推送!

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
天王山见!米切尔43分赢回尊重 哈登11助攻主导23-0得分狂潮

天王山见!米切尔43分赢回尊重 哈登11助攻主导23-0得分狂潮

枪炮篮球 PiU
2026-05-12 10:58:07
张雪发声祝贺!吉利拿下重磅荣誉,中国赛车杀疯了

张雪发声祝贺!吉利拿下重磅荣誉,中国赛车杀疯了

雷科技
2026-05-11 18:18:52
原本只是想压价,舆论让央视进退两难!不买版权或造成更大损失

原本只是想压价,舆论让央视进退两难!不买版权或造成更大损失

中国足球的那些事儿
2026-05-09 17:34:11
85年,娘带我去舅舅家借钱过年空手而归,走到半路舅舅追上我们

85年,娘带我去舅舅家借钱过年空手而归,走到半路舅舅追上我们

人间百态大全
2026-05-11 06:35:06
外交部:中方决定不同意台湾地区参加今年世卫大会

外交部:中方决定不同意台湾地区参加今年世卫大会

澎湃新闻
2026-05-11 17:56:05
俄罗斯警告波兰:疯狂扩军的代价,最后全由老百姓买单

俄罗斯警告波兰:疯狂扩军的代价,最后全由老百姓买单

桂系007
2026-05-07 23:36:15
英超欧战大丰收!九队狂揽6.67亿欧,阿森纳1.43亿领跑

英超欧战大丰收!九队狂揽6.67亿欧,阿森纳1.43亿领跑

星耀国际足坛
2026-05-12 13:30:05
情侣在瑞士雪山顶“撒欢”,就这么被全世界直播了···

情侣在瑞士雪山顶“撒欢”,就这么被全世界直播了···

新欧洲
2026-04-21 19:37:05
这五位中性风女星,个个风格独特颜值惊艳,有人已婚有人至今单身

这五位中性风女星,个个风格独特颜值惊艳,有人已婚有人至今单身

暖心萌阿菇凉
2026-05-11 13:26:07
穆帅:再说一遍我没和皇马谈过;进不进欧冠不会影响我的未来

穆帅:再说一遍我没和皇马谈过;进不进欧冠不会影响我的未来

懂球帝
2026-05-12 07:05:06
歌手黄霄云演出后两次晕倒确诊耳石症!连夜赶路连唱9首,工作室强制停工

歌手黄霄云演出后两次晕倒确诊耳石症!连夜赶路连唱9首,工作室强制停工

TVB的四小花
2026-05-11 13:59:18
伊朗没料到:打了一仗,没灭掉以色列,反在家门口造出一个更狠的

伊朗没料到:打了一仗,没灭掉以色列,反在家门口造出一个更狠的

阿潘小世界
2026-05-12 11:05:12
功夫巨星新片惨败,三天没有票房统计,观众差评如潮

功夫巨星新片惨败,三天没有票房统计,观众差评如潮

影视高原说
2026-05-10 13:09:18
福气敲门!未来一周有一笔横财天降的3个生肖,好日子真的来了

福气敲门!未来一周有一笔横财天降的3个生肖,好日子真的来了

毅谈生肖
2026-05-11 11:56:15
超级大黄蜂精准摧毁伊朗油轮,伊朗又赢麻了

超级大黄蜂精准摧毁伊朗油轮,伊朗又赢麻了

移光幻影
2026-05-08 08:49:53
杭州市拱墅区半山街道原党工委副书记、办事处主任潘金财涉嫌严重违纪违法,目前正接受拱墅区纪委区监委纪律审查和监察调查

杭州市拱墅区半山街道原党工委副书记、办事处主任潘金财涉嫌严重违纪违法,目前正接受拱墅区纪委区监委纪律审查和监察调查

都市快报橙柿互动
2026-05-11 19:57:59
途经芳村!设计时速160公里!即将全面施工→

途经芳村!设计时速160公里!即将全面施工→

广州交通电台
2026-05-12 09:56:13
湖北单亲妈妈嫁65岁美国老头,带儿子移民美国,婚后14年老头去世

湖北单亲妈妈嫁65岁美国老头,带儿子移民美国,婚后14年老头去世

哄动一时啊
2026-02-09 16:56:31
高市早苗好狠:赶在特朗普访华前,给了他一刀,连中国都没想到!

高市早苗好狠:赶在特朗普访华前,给了他一刀,连中国都没想到!

史行途
2026-05-11 17:38:38
美国不要的,中国也坚决不要!

美国不要的,中国也坚决不要!

隔壁董小姐
2026-05-11 07:52:20
2026-05-12 15:36:49
新智元 incentive-icons
新智元
AI产业主平台领航智能+时代
15189文章数 66863关注度
往期回顾 全部

科技要闻

纳德拉法庭爆料:拒当“AI时代的IBM”

头条要闻

45岁独身男子病逝15万存款被指遭民政局转走 当地回应

头条要闻

45岁独身男子病逝15万存款被指遭民政局转走 当地回应

体育要闻

总是掉链子的“倒霉蛋”,闯进了欧战决赛

娱乐要闻

刘涛晒妈祖诞辰活动照 评论区变许愿池

财经要闻

黄仁勋真是被白宫彻底封杀了

汽车要闻

吉利银河“TT”申报图曝光 电动尾翼+激光雷达

态度原创

游戏
家居
健康
艺术
军事航空

《深海迷航2》愿望单突破500万 多次跳票即将抢测

家居要闻

极简主义下的居住场域与空间

干细胞能让人“返老还童”吗

艺术要闻

这位画家的油画美人让人惊叹不已!

军事要闻

知情人士披露:美国或考虑恢复对伊朗军事行动

无障碍浏览 进入关怀版