网易首页 > 网易号 > 正文 申请入驻

Gemini手搓3D粒子特效,体验现实版钢铁侠

0
分享至


新智元报道

编辑:定慧

【新智元导读】无需懂一行代码,Gemini 3正在重塑3D交互创作的边界!详细对比了Canvas与AI Studio在开发场景下的独特优势,带你亲身体验这场「零门槛」的3D交互革命。

Gemini 3的威力其实并没有被很多人真正的意识到。

最近,el.cine演示了如何仅通过简单的提示词,生成一个实时交互的3D粒子系统。


用户可以通过摄像头检测双手张合的手势来直接控制粒子群的缩放和扩散。

用同款提示词在Gemini Canvas试了一下,简直惊掉了下巴。


还可以升级,现在是识别一只手,可以识别两只手,把粒子完全分开。



完全就是AR级别的控制效果,感觉我就是钢铁侠本侠。


提示词非常简单:

提示:使用Three.js创建一个实时交互的3D粒子系统。

要求:

1、通过摄像头检测双手的张合与握紧,控制粒子群的缩放与扩散。

2、提供可选择心形/花朵/土星/佛像/烟花等模板的。

3、面板支持通过颜色选择器调整粒子颜色粒子。

4、需实时响应手势变化,界面设计简洁现代界面设计简洁现代。

整个过程完全无需编程基础,只需在Gemini中输入提示词即可。

这一成果不仅震惊了有经验的程序员(他们曾需花费数周学习GLSL着色器),更标志着复杂3D交互内容的创作门槛被彻底消除,被认为是正在见证的历史性时刻。

而且这个效果,只有Gemini能够「直出」这个效果。

就连谷歌AI Studio自带的Build也不能一次性跑出这么好的结果。


然后Gemini里自带的Canvas,还自带了控制台和代码Fix。

这还要什么Cursor!


第一次跑就这个结果,我以为大家都是这样,然后用了其他几个AI工具。

都没有Gemini跑出来的惊艳。


甚至有些直接就无法使用。


作者原来的例子效果也看起来要好一点。(怀疑是进行了多轮对话以后的结果)


被低估的Canvas

其实很多人还是低估了Canvas的威力了。

比如你想裁剪最近很流行的表情包。

如果直接使用Nano Banana Pro去截图,往往有种「大炮打蚊子」的感觉。

但是如果你先用Canvas做一个截图小工具,甚至还可以选择几行几列的截图,最后还能打包好后下载为zip压缩包。


Canvas是集成在Gemini网页版中的一个功能界面,对标的是OpenAI的Canvas和Anthropic的Artifacts。

核心机制:侧边栏的独立渲染

在传统的ChatGPT界面中,代码和文本是混在对话流里的。如果你想修改一段生成的代码,通常需要「复制-粘贴-修改-再粘贴」。

Canvas的逻辑是:将「对话(Chat)」与「内容(Content)」分离。

左侧:你的对话指令区。

右侧:一个独立的编辑器/渲染器窗口。

Canvas的三大技术杀手锏

这次3D粒子系统之所以能跑通,Canvas的功劳占了一半:

HTML/JS/React实时渲染环境:Canvas就像在浏览器里内置了一个轻量级的IDE。它不仅能显示代码,还能直接运行前端代码。对于WebGL(如Three.js)这种依赖浏览器环境的库,Canvas提供了原生的执行沙箱,这使得调用摄像头(WebcamAPI)变得非常顺滑,而不需要像以前那样把代码复制到本地服务器运行。

针对性的代码修复(FixButton):不同于普通的「重新生成」,Canvas允许你高亮右侧的一段代码或文本,然后告诉AI:「把这里的逻辑改一下」。它只针对局部进行微调,而不是重写全文。这对于调试复杂的3D渲染逻辑至关重要。

多模态的即时反馈:它支持生成图表、网页原型、文档。当你输入「把背景改成黑色」时,右侧的Canvas是实时刷新的,这种低延迟的反馈循环大大降低了试错成本。

适用人群:产品经理、前端设计师、数据分析师、轻量级代码编写者。

被低估的AI Studio

而另一个更被低估的就是AI Studio,AI Studio可以说是开发者的「核武库」。

如果说Canvas是装修精美的样板间,那么谷歌AIStudio就是堆满工具和原材料的施工现场。

它是目前访问Gemini API最快、最直接的路径。

核心定位:模型调试与Prompt Engineering

AI Studio不是为了让你聊天,而是为了让你构建应用

之前的例子中提到AI Studio的Build功能跑分不如Gemini Canvas,这其实是因为两者的侧重点不同。

AI Studio的硬核特性:

超长上下文(Context Window):这是AI Studio的杀手锏。

它支持Gemini 1.5 Pro的200万token上下文。你可以把整本技术文档、几小时的视频、或者整个项目的代码库直接拖进去。


  • 对比Canvas:Canvas的上下文虽然也长,但为了响应速度做了截断和优化;AI Studio则是「生吞」海量数据。


System Instructions(系统指令):在AI Studio里,你可以设置通过「系统指令」来定义模型的角色、语气和输出格式。这比在聊天框里说「你现在是一个xxx」要稳定得多,权重更高。

多模态原生输入:你可以上传一段40分钟的视频,AI Studio不会将其转化为文本字幕,而是直接「看」视频的每一帧。这对于视频理解、音频分析任务是降维打击。

Prompt Caching(提示词缓存):对于开发者来说,这能极大降低API调用成本和延迟。如果你的Prompt有一部分是固定的(比如一本巨大的规则书),AI Studio允许你缓存这部分内容。

适用人群:能够写Python/Node.js的开发者、企业级应用构建者、需要处理海量数据的研究人员。

而且官方给出了很多高质量的Vibe Coding作品库。

案例很多:

  • 涵盖了近100多种Vibe Coding作品;

  • 包含图像生成、视频创作、游戏开发、文本处理、代码生成等多领域;

  • 都是些很惊艳的范例:如漫画生成器、电商产品摄影棚、像素艺术场景生成、YT视频转互动学习应用。


比如可以在网页里玩跑酷。


或者在网页中生成4K高清壁纸。


还有很多例子,都是非常棒的Vibe Coding模板。

不过为什么上面那个粒子效果AI Studio不如Canvas呢?

大概猜一下,这涉及到底层的运行环境策略


  1. Canvas的优化目标是「一次性交付」:

    谷歌对Canvas模式下的模型进行了微调(Fine-tuning),强化了它生成完整、可运行的前端代码的能力,并自动补全了许多 Web 环境下的依赖库。

  2. AIStudio的环境更「裸」:

    AI Studio的预览功能主要是为了测试 API 的输出,它的沙箱环境并没有像 Canvas 那样针对流行的前端库(如 Three.js, React, Tailwind)做极致的预加载和兼容性优化。


最后,简单总结就是:

如果你想要一个结果(比如一个能玩的 3D 网页),用Gemini Canvas

如果你想要基于这个结果开发一个APP(比如获取它的 API 调用逻辑,集成到你自己的服务器),用AIStudio

想要体验上述粒子效果可以把下面代码拷贝到HTML单文件中,用浏览器打开即可。

html>

参考资料:

https://aistudio.google.com/apps

秒追ASI

⭐点赞、转发、在看一键三连⭐

点亮星标,锁定新智元极速推送!

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
恭喜湖人!冠军中锋来了!老詹东契奇或迎雷霆首发内线哈滕

恭喜湖人!冠军中锋来了!老詹东契奇或迎雷霆首发内线哈滕

湖人侃球师
2026-02-01 06:50:07
轻易把女人约出来的4种方法,坏男人都精通,老实男快学

轻易把女人约出来的4种方法,坏男人都精通,老实男快学

文雅笔墨
2026-01-31 03:31:14
湖人三分出手多但不准,东契奇八村塁难扛大旗,乐福或成破局关键

湖人三分出手多但不准,东契奇八村塁难扛大旗,乐福或成破局关键

不凡体育
2026-02-01 13:08:10
害怕春节被“斩首”?赖清德当局加紧春节备战!模拟解放军突袭机场等关键设施,台军演练短程防空接战、地空整体作战、无人机攻击等

害怕春节被“斩首”?赖清德当局加紧春节备战!模拟解放军突袭机场等关键设施,台军演练短程防空接战、地空整体作战、无人机攻击等

每日经济新闻
2026-01-31 19:15:15
美国华人直言:中国手机扫码支付是最不智能的发明!

美国华人直言:中国手机扫码支付是最不智能的发明!

阿伧说事
2026-01-20 12:53:01
婆婆当了近四十年的老师,今年刚好退休,我还以为退休金最多4000

婆婆当了近四十年的老师,今年刚好退休,我还以为退休金最多4000

五元讲堂
2026-01-26 11:26:26
破旧衣服大叔摸狗后续:狗主人回应,已联系社区帮助,大叔已回家

破旧衣服大叔摸狗后续:狗主人回应,已联系社区帮助,大叔已回家

离离言几许
2026-01-31 11:04:37
蒙哥马利有多痴情?对寡妇贝蒂一见钟情,甘愿做她两个孩子的继父

蒙哥马利有多痴情?对寡妇贝蒂一见钟情,甘愿做她两个孩子的继父

饭小妹说历史
2026-01-17 09:12:37
日本羽毛球界再次诞生超级美少女,韩媒疯狂报道

日本羽毛球界再次诞生超级美少女,韩媒疯狂报道

随波荡漾的漂流瓶
2026-01-22 12:00:14
2月1日,券商给予评级并且给出目标价的公司一览

2月1日,券商给予评级并且给出目标价的公司一览

A股数据表
2026-02-01 06:00:03
中国芯片英雄,被美国囚禁9年后终于回家!他反手把苹果告上法庭

中国芯片英雄,被美国囚禁9年后终于回家!他反手把苹果告上法庭

胖哥不胡说
2026-01-24 18:45:24
中铁建领导、员工薪资大曝光!

中铁建领导、员工薪资大曝光!

黯泉
2026-01-31 22:24:38
28元到5元!“股息奶牛”大秦铁路陨落,21万股民被套真相

28元到5元!“股息奶牛”大秦铁路陨落,21万股民被套真相

慧眼看世界哈哈
2026-01-07 11:54:23
连超湖人太阳升西部第5!华子33分森林狼大胜灰熊 兰德尔27+7+7

连超湖人太阳升西部第5!华子33分森林狼大胜灰熊 兰德尔27+7+7

醉卧浮生
2026-02-01 11:20:02
董璇小酒窝参加朵朵生日会,陈思诚罕见露面,两家人合照太有爱了

董璇小酒窝参加朵朵生日会,陈思诚罕见露面,两家人合照太有爱了

扒虾侃娱
2026-01-31 18:25:21
为什么大多数中国家长无法独立带娃?网友的分享犹如醍醐灌顶

为什么大多数中国家长无法独立带娃?网友的分享犹如醍醐灌顶

另子维爱读史
2026-01-31 20:12:55
最惨首相诞生?高市早苗支持率雪崩,17天豪赌变全民打脸现场!

最惨首相诞生?高市早苗支持率雪崩,17天豪赌变全民打脸现场!

孤单是寂寞的毒
2026-02-01 12:47:43
78岁连路都走不稳还开演唱会,全网骂声一片,她却扬言回馈粉丝

78岁连路都走不稳还开演唱会,全网骂声一片,她却扬言回馈粉丝

林雁飞
2026-01-29 16:31:48
山东省纪委监委最新通报!

山东省纪委监委最新通报!

齐河大视野广告
2026-02-01 10:49:23
马斯克拉响警报:旧世界只剩5年,中国手握的唯一王牌,不是芯片

马斯克拉响警报:旧世界只剩5年,中国手握的唯一王牌,不是芯片

郭蛹包工头
2026-01-30 11:33:20
2026-02-01 13:56:49
新智元 incentive-icons
新智元
AI产业主平台领航智能+时代
14455文章数 66556关注度
往期回顾 全部

科技要闻

腾讯元宝宣布:10亿现金红包,今日开抢

头条要闻

媒体:宝可梦十年间三次踩线 可不是简单的"工作失误"

头条要闻

媒体:宝可梦十年间三次踩线 可不是简单的"工作失误"

体育要闻

锁喉吃红牌+扇耳光 英超15人打群架

娱乐要闻

马年春晚第三次联排,多位明星现身

财经要闻

黄仁勋台北"夜宴":汇聚近40位台企高管

汽车要闻

新款宾利欧陆GT S/GTC S官图发布 V8混动加持

态度原创

亲子
家居
艺术
房产
军事航空

亲子要闻

萌娃爆笑模仿爸爸打呼噜,逗得妈妈哈哈大笑

家居要闻

蓝调空舍 自由与个性

艺术要闻

明代隐藏的“草书高手”,他的字无人能模仿

房产要闻

藏不住的小城大事,海澄新城执掌自贸港风口,进阶兑现美好生活新篇

军事要闻

伊朗民众:伊朗不会屈服于美国霸权

无障碍浏览 进入关怀版