网易首页 > 网易号 > 正文 申请入驻

实测字节豆包1.8,我用Trae和MCP搓出了实时装修Agent

0
分享至

除了日更图文,

最近我拍的短视频清晰度已经卷到99%了,灯光,拍摄设备,后期流程,能优化的几乎都到头了。

但我想玩点不同的,我背后的空间本身是不是也能成为创作的一部分,用Agent来为我规划每一个角落。我有个很喜欢的科技圈博主@贪玩歌姬小宁子,她每次aroll拍摄每一次都会重新布景,


好玩,想学,我的思路是这样子的,

我没那么大的团队和空间,但我可以用Agent来设计空间里面可替换的物品,组合出不同的搭配,这样我除了ai测评题材,还可以做DIY,科普和数码。

于是,我跟加强过Agent能力的豆包1.8一拍即合,


昨天在火山引擎2025年冬季的原动力大会上已经看到很多离谱的案例了。

长话短说,

这次升级了工具调用,多轮指令遵循和多模态理解能力。1秒1帧的情况下可以理解20分钟的中长视频。

平时测试模型的代码能力已经快腻了,前端,3D建模,写作,物理模拟老四样,感觉在同一套里圈圈圆圆圈圈,

还是做一个能影响物理世界的Agent有挑战性。


一起来头脑风暴一下把大象放进冰箱

把一个空间轻装修要分几步,

模型要能读取视频,理解已有的空间关系吧,还需要把不同的场景搭配记录到本地,

最好它还会点CAD图,说不定能帮我找到现在租的这间房子里有没有隐藏的可改造角落,或者分析出有哪些尺寸特殊的家具是需要提前去定制的。

定制的话就要全网比价,这个Agent需要联网,把搜索到的信息整理成文档并自动发送给我。

我花了小两周的时间,在Trae+MCP上实现了这个Agent的完全体。所以让我来一个个模块介绍一下,

读取本地的视频和图片,是我的好朋友@梦飞直接用的豆包多模态能力封装成MCP。

每个MCP的配置教程我都打包好了,还是公众号回复“豆包1.8”就行


原理很简单,就是把视频和图片上传到火山引擎的TOS对象存储,然后就可以通过火山引擎的服务获取到视频解析后的文字版描述。


上传 # 本地视频 到TOS,然后分析视频的场景结构,告诉我哪些场景适合剪辑成短视频:


豆包给我的回复是,

视频中的照片墙和乐高墙是很有记忆点的品牌资产,建议在我以后录制真人出镜视频时,将其作为固定的背景。

以及我需要一件能够撑起画面专业度的核心家具。一个升降式的实木长桌来取代我的白色异形桌,方便我切换坐姿和站姿,以及拍AI硬件的特写。

因为我觉得文字沟通不够直观,我还给豆包1.8加装了火山引擎版本的jimeng-ai-mcp,让它可以生成效果图,


为了不占地,我还设计了一个没有桌脚的升降桌,重新设计了一下打光系统,


更新装修进度文件我用的是Excel MCP。我一开始用的是Filesystem,但它只能进行简单的读写,而豆包1.8+Excel MCP组合后能理解表格的结构,它知道什么是行,什么是列,能把信息填入对应的单元格。


手搓的过程中,我还找到了目前租的房子的平面图,加上我现场的补充图片(因为会有添置的一些家具),一起丢给豆包1.8,让它给我更多的空间搭配建议。



为了更直观,我用豆包生图重现了一套方案的预览图。


在本地搭Agent有一个隐形的好处,就是你可以像搭乐高一样,自由搭配你需要的联网MCP。

我的经验是国内信息博查,国外信息Exa,组合起来用。

当豆包确定了需要定制的家具列表和尺寸后,我授权它去全网搜索信息,对比不同品牌、材质、价格,把最合适的几个选项,连同购买链接和参数,整理出来。

接了Tripo3D的MCP后,还可以按照尺寸定制一个简单的沙发建模,要是能加上材质配个云朵沙发就更好了。


最后,豆包将这一切汇总,把当天的进度更新、下一步的计划、还有家具的备选清单,自动做成一个多维表格,记录有变化的时候推送给我。


当这个流程第一次完整跑通的时候,

我实打实感觉到这些会消耗我心力的检查、搜索、对比、整理工作,都被它接管了。我只需要专注于整个项目里最核心、最享受的部分,

也就是最初的创意和最终的决策。

这次的体验,让我对AI影响物理世界这件事,有了点想法。它让我从工作室改造计划,回到了我的真实生活,

一个更小,但可能更迫切的需求上。

那就是,我真的很想买个按摩椅啊啊啊。

因为目前房间不大,每次想到要去测量尺寸,上网搜寻各种小型号的按摩椅,再在脑子里模拟把它放在哪个角落不会挡路,这一系列琐碎的步骤一拖再拖。

于是,按摩椅它整个双十一就一直躺在我的购物车里。但现在,我有了新的思路。我完全可以拿起手机,对着我的房间拍一段视频,

然后把视频丢给豆包,直接告诉它,我想在这个房间里放一个按摩椅,帮我规划一下。

它完全有能力通过视频理解我房间的空间布局,分析出可行的摆放位置,再去网上寻找符合空间尺寸的商品,甚至可以告诉我,如果想把它放在窗边,我可能需要把那个书架往左移动五十厘米。

一个让我头疼不已的空间规划问题,

就变成了一个可以执行的方案。

过去半年,我会觉得AI要真正影响和改造物理世界,是需要重依赖物理设备的,比如眼镜、手表,或者各种形态挂件。

但这次构建Agent的过程,

我发现其实不需要等,

其实有台手机就够了,

我的按摩椅可算找到几个完美适配的角落,


朝向都安排好了,

激情下单!

@ 作者 / 卡尔

最后,感谢你看到这里如果喜欢这篇文章,不妨顺手给我们点赞|在看|转发|评论

如果想要第一时间收到推送,不妨给我个星标

如果你有更有趣的玩法,欢迎在评论区和我聊聊

更多的内容正在不断填坑中……


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
走失25年的她,把故乡念成“主猫鸭”,一个程序员听懂后帮她找到了家

走失25年的她,把故乡念成“主猫鸭”,一个程序员听懂后帮她找到了家

扬子晚报
2026-02-12 10:40:11
中国造防空导弹遭猎杀,无人机也被摧毁,“凶手”来自土耳其

中国造防空导弹遭猎杀,无人机也被摧毁,“凶手”来自土耳其

策略述
2026-02-11 16:22:12
震惊!网传安徽某公司春节安排两人加班,3倍工资,额外5000每人

震惊!网传安徽某公司春节安排两人加班,3倍工资,额外5000每人

火山詩话
2026-02-12 06:49:09
马筱梅突然提前报喜,宝宝意外降生,汪小菲专程赴曼谷还愿超暖心

马筱梅突然提前报喜,宝宝意外降生,汪小菲专程赴曼谷还愿超暖心

做一个合格的吃瓜群众
2026-02-12 18:25:01
这种饮料是智商税,但厂家赚翻了

这种饮料是智商税,但厂家赚翻了

智识漂流
2026-02-11 22:30:57
罗永浩怼段永平“懂个屁”,这个全是“破烂”的时代

罗永浩怼段永平“懂个屁”,这个全是“破烂”的时代

不正确
2026-02-11 22:53:03
东北辽宁方大集团“霸总”累计给员工发40亿红包,现场摆数米高“现金墙”

东北辽宁方大集团“霸总”累计给员工发40亿红包,现场摆数米高“现金墙”

大风新闻
2026-02-12 17:52:06
性商训练营乱象调查:3天要价近五千,还兜售“缩阴”凝胶

性商训练营乱象调查:3天要价近五千,还兜售“缩阴”凝胶

南方都市报
2026-02-12 11:46:15
纽约时报:不要相信那些把中国大学排在第一位的排名

纽约时报:不要相信那些把中国大学排在第一位的排名

朗威谈星座
2026-02-12 08:13:40
七个姐妹凑70万开咖啡店,结果从“七仙女”变成“战国七雄”互掐

七个姐妹凑70万开咖啡店,结果从“七仙女”变成“战国七雄”互掐

达文西看世界
2026-02-12 11:31:45
河村勇辉狂轰34+8+16:创两项生涯新高 世预赛将成中国男篮大敌

河村勇辉狂轰34+8+16:创两项生涯新高 世预赛将成中国男篮大敌

醉卧浮生
2026-02-12 15:24:31
春节前车厘子现大面积“翻车”,消费者吐槽收到“陈年僵尸果”,专家:今年春节较晚,受卖家赌涨价压货影响

春节前车厘子现大面积“翻车”,消费者吐槽收到“陈年僵尸果”,专家:今年春节较晚,受卖家赌涨价压货影响

海峡网
2026-02-12 15:30:12
恐怖20连胜!曼城缔造神迹,瓜帅狂赞塞梅尼奥:难以置信的引援

恐怖20连胜!曼城缔造神迹,瓜帅狂赞塞梅尼奥:难以置信的引援

听我说球
2026-02-12 08:58:59
高市早苗大获全胜之后,我们一些人真该好好反思

高市早苗大获全胜之后,我们一些人真该好好反思

少年一白
2026-02-11 02:54:53
太意外!38岁中国教练率意大利击败中国队夺金牌,曾婉拒回国执教

太意外!38岁中国教练率意大利击败中国队夺金牌,曾婉拒回国执教

法老不说教
2026-02-12 17:05:59
中国已购买部分美国政府出售的委内瑞拉石油?外交部回应

中国已购买部分美国政府出售的委内瑞拉石油?外交部回应

北青网-北京青年报
2026-02-12 19:44:01
乌克兰火烈鸟导弹击中科特卢班炮兵总局!或摧毁俄最大军火库

乌克兰火烈鸟导弹击中科特卢班炮兵总局!或摧毁俄最大军火库

项鹏飞
2026-02-12 18:15:02
全球最贵!10岁马来西亚男孩100美元买下域名“AI.com”,33年后卖出7000万美元

全球最贵!10岁马来西亚男孩100美元买下域名“AI.com”,33年后卖出7000万美元

台州交通广播
2026-02-12 00:21:21
中央戏剧学院表演系原主任陈刚,主动投案!闫学晶儿子就是这个系

中央戏剧学院表演系原主任陈刚,主动投案!闫学晶儿子就是这个系

阿讯说天下
2026-02-12 16:51:21
和平委员会解散,七国集团瓦解,特朗普转向中国组建五国集团

和平委员会解散,七国集团瓦解,特朗普转向中国组建五国集团

残梦重生来
2026-02-11 23:33:50
2026-02-12 23:59:00
卡尔的AI沃茨 incentive-icons
卡尔的AI沃茨
前大厂算法工程师,3家科技公司技术总监|致力打造最系统的Al学习体系,让1万人通过Al提高生产力
212文章数 91关注度
往期回顾 全部

科技要闻

10倍速的一夜:三大模型春节前的暗战

头条要闻

美称中国已购买美国出售的委内瑞拉石油 中方回应

头条要闻

美称中国已购买美国出售的委内瑞拉石油 中方回应

体育要闻

31岁首次参加冬奥,10年前她是个水管工

娱乐要闻

《惊蛰无声》违规抢占排片遭影院控诉

财经要闻

“影子万科”如何掘金万科?

汽车要闻

开212 T01柴油版去穿越 连牧马人都跟不上

态度原创

手机
亲子
本地
公开课
军事航空

手机要闻

荣耀MagicOS二月新春特别更新发布

亲子要闻

孩子最渴望听到父母说的五句话

本地新闻

下一站是嘉禾望岗,请各位乘客做好哭泣准备

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

美国新交付F35隐身战机没雷达

无障碍浏览 进入关怀版