网易首页 > 网易号 > 正文 申请入驻

通过使用合成数据来微调 AI 模型,提高多摄像头追踪的准确性

0
分享至

数字孪生能够有效地为工厂、零售空间等资产创建基于物理学的虚拟复制品,实现对现实世界环境的精确仿真。这使得大规模且具有特定用途的合成数据在现实世界的计算机视觉和 AI 工作流中变得越发重要。

基于 NVIDIA Omniverse 构建的 NVIDIA Isaac Sim 是一个完全可扩展的参考应用,可用于设计、模拟、测试和训练由 AI 赋能的机器人。Omni.Replicator.Agent (ORA) 是 Isaac Sim 中的一个用于生成合成数据的扩展程序。它所生成的合成数据可专门用于训练计算机视觉模型,例如 TAO PeopleNet Transformer 和 TAO ReIdentificationNet Transformer 等。

本文是构建多摄像头追踪视觉 AI 应用系列文章的第二篇文章。在第一篇文章中,我们从头到尾介绍了多摄像头追踪工作流,包括模型仿真、训练和部署,以及该工作流中的其他环节。

现在,我们将深入探讨仿真和训练步骤。我们会在这个过程中生成高质量的合成数据,这些数据用于根据特定用例对基础模型进行微调。本文将为您介绍 TAO ReIdentificationNet (ReID),它是一个常用于多摄像头追踪 (MTMC) 和实时定位系统 (RTLS) 应用的网络,能够在不同的摄像头视图中追踪和识别目标对象。本文还将说明如何使用从 ORA 采集的合成数据来提高 ReID 的准确性。

具体而言,我们将演示如何使用从 Isaac Sim 的 ORA 扩展程序中获取的数据以及 NVIDIA TAO API 对 ReID 模型进行训练和微调,使该模型能够满足您的使用需求。这让您能够自如地使用合成数据来扩充现有的真实数据集,提高数据集的多样性和模型的稳健性。

图 1. 仿真-训练-构建-部署工作流

本文中重点介绍的工作流可让您在合成数据上对 ReID 模型进行微调。ORA 扩展程序提供了一种记录角色移动的灵活方式,而 TAO API 提供了一种开发者友好的训练、推理、评估和导出微调后的 ReID 模型的方式,不需要进行任何标记工作就能帮助提高模型的准确性。

如要使用涵盖从仿真、微调到部署等整个视觉 AI 生命周期的 NVIDIA 工具定制和进一步构建工作流,请参见 Metropolis 多摄像头 AI 快速入门指南。如果遇到技术问题,请访问 NVIDIA TAO 论坛或 Isaac Sim 论坛:

https://forums.developer.nvidia.com/c/accelerated-computing/intelligent-video-analytics/tao-toolkit/17

https://forums.developer.nvidia.com/c/agx-autonomous-machines/isaac/sdk/68

如需了解本文完整信息,请参见以下链接

https://mp.weixin.qq.com/s?__biz=MzU2NzkyMzUxMw==&mid=2247546491&idx=2&sn=ee3f29789f95f6c6c92334d11e763508&chksm=fc97b02dcbe0393b319e5e0433724d5f0ab9fdf68722d542022ecedf1d60e966229f6104703e#rd

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
6万座"大巨蛋" 选址定了 上海杨浦拿下

6万座"大巨蛋" 选址定了 上海杨浦拿下

看看新闻Knews
2026-06-22 15:45:27
媒体人:巴西前锋马尔康被推回中国市场了

媒体人:巴西前锋马尔康被推回中国市场了

懂球帝
2026-06-22 15:09:33
东契奇和湖人管理层已收到警告,内容是希望他们能够离杜伦远一点

东契奇和湖人管理层已收到警告,内容是希望他们能够离杜伦远一点

移动挡拆
2026-06-22 07:43:52
办世界杯竟成烫手山芋,2030年仅两个申办国,为啥没人抢?

办世界杯竟成烫手山芋,2030年仅两个申办国,为啥没人抢?

叹为观止易
2026-06-08 14:22:53
5000万婚礼,陈婉珍一毛不拔,豪门冷血真相

5000万婚礼,陈婉珍一毛不拔,豪门冷血真相

圆梦的小老头
2026-06-09 15:50:06
表演艺术家雷军

表演艺术家雷军

不正确
2026-06-19 19:24:58
巴西女排爆冷输球,全胜战绩终结,日本队两连败,泰国无缘三连胜

巴西女排爆冷输球,全胜战绩终结,日本队两连败,泰国无缘三连胜

跑者排球视角
2026-06-21 23:57:00
女演员,吃了没文化的亏

女演员,吃了没文化的亏

新动察
2026-06-21 17:02:06
吃播良子被曝“大结局”倒计时:血糖破7牙齿烂光,网友却祝他“早点猝死”

吃播良子被曝“大结局”倒计时:血糖破7牙齿烂光,网友却祝他“早点猝死”

热搜摘要官
2026-06-20 00:49:00
非常罕见的老照片:退休多年的华国锋,看望生病的老革命家彭真

非常罕见的老照片:退休多年的华国锋,看望生病的老革命家彭真

文史季季红
2026-06-22 12:20:06
国防部出手了,比断供稀土还狠,困境来得太快,中国将有大动作?

国防部出手了,比断供稀土还狠,困境来得太快,中国将有大动作?

锅锅爱历史
2026-06-21 23:00:16
宾利新车官宣,6月20日,已正式上市

宾利新车官宣,6月20日,已正式上市

科技堡垒
2026-06-20 11:55:05
彻查!信号强烈!中央升级反腐“天网”!

彻查!信号强烈!中央升级反腐“天网”!

职场资深秘书
2026-06-21 14:07:53
南京27公斤黄金盗窃案,童某落网细节公布:在距离中越边境线仅百米处被截获;2名主犯都是高学历赌徒,童某赌债高达700万元

南京27公斤黄金盗窃案,童某落网细节公布:在距离中越边境线仅百米处被截获;2名主犯都是高学历赌徒,童某赌债高达700万元

荔枝新闻
2026-06-22 17:02:49
全球破19亿,北美夺冠,中国票房仅37.2万,观众给好莱坞上了一课

全球破19亿,北美夺冠,中国票房仅37.2万,观众给好莱坞上了一课

靠谱电影君
2026-06-22 17:02:52
几乎全是假货!利润高达2400%,为何消费者还前赴后继争相购买?

几乎全是假货!利润高达2400%,为何消费者还前赴后继争相购买?

离离言几许
2026-06-22 15:58:48
存款高于这个数,不必攀比,你已经拥有安稳的生活底色

存款高于这个数,不必攀比,你已经拥有安稳的生活底色

坠入二次元的海洋
2026-06-22 11:05:15
今年618,手机厂商全军覆没……

今年618,手机厂商全军覆没……

黑马公社
2026-06-22 11:49:51
陪玩陪睡只是皮毛!继关晓彤后,向佐再曝“猛料”,谢娜也没逃过

陪玩陪睡只是皮毛!继关晓彤后,向佐再曝“猛料”,谢娜也没逃过

趣文说娱
2026-06-21 23:14:56
中国灵活就业者突破3.2亿大关,占就业人口比例高达44%。

中国灵活就业者突破3.2亿大关,占就业人口比例高达44%。

流苏晚晴
2026-06-13 18:21:18
2026-06-22 18:15:00
NVIDIA英伟达中国 incentive-icons
NVIDIA英伟达中国
英伟达(中国)官方账号
3576文章数 1459关注度
往期回顾 全部

科技要闻

智谱盘中狂飙超40%,市值破万亿港元

头条要闻

离异男爽快加价20万买房 过户后卖家傻眼:房子被抵押

头条要闻

离异男爽快加价20万买房 过户后卖家傻眼:房子被抵押

体育要闻

法国球星祝中国队下届世界杯取得好成绩

娱乐要闻

陪睡陪玩是皮毛,向佐揭内娱暗规则

财经要闻

多部门核查"婴幼儿纸尿裤甲酰胺问题"

汽车要闻

电动MINIJCW缎光特别版藏锋上市尽显低调赛道本色

态度原创

健康
旅游
数码
公开课
军事航空

吃粽子的3条保胃法则,消化科医生推荐

旅游要闻

711万游客赴约!上海端午以传统新意撬动百亿文旅消费

数码要闻

2026年618毕业季换机指南|HyperX暗影精灵PRO 16深度解析

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

东风-17发射状态首次公开 多车齐射场面硬核

无障碍浏览 进入关怀版