网易首页 > 网易号 > 正文 申请入驻

NVIDIA NIM 微服务现已推出,可简化 RTX AI PC 和工作站的智能体工作流

0
分享至

生成式 AI 为 PC 和工作站带来了全新功能,包括游戏助手、增强的内容创作和生产力工具等。

现已推出的 NVIDIA NIM 微服务和即将推出的 AI Blueprints 可加速 AI 开发和提升其可用性。NVIDIA NIM 于 1 月在 CES 上推出,提供针对 NVIDIA RTX 平台优化的预打包先进 AI 模型,包括 NVIDIA GeForce RTX 50 系列及全新 NVIDIA Blackwell RTX PRO GPU。微服务易于下载及运行。微服务涵盖了顶级 PC 开发模态,并与顶级生态系统应用和工具兼容。

在计算领域的关键时刻,突破性的 AI 模型和全球开发者社区正在推动 AI 赋能工具和工作流的爆炸式增长,NIM 微服务和 AI Blueprint 正助力为 PC 带来关键创新。

NIM 助您马上出发

尽管 AI 的创新速度惊人,但 PC 开发者社区仍然很难上手这项技术。

将 AI 模型从研究引入 PC 需要模型变体管护、输入输出数据的自适应管理和量化以优化资源的使用。此外,模型必须转化为与优化的推理后端软件配合使用,并连接到全新的 AI 应用编程接口(API)。这需要付出巨大的努力,可能会减缓 AI 的普及。

NVIDIA NIM 微服务通过提供预打包、经优化,易于下载且连接到行业标准 API 的 AI 模型,帮助解决了这一问题。它们针对 RTX AI PC 和工作站上的性能进行了优化,并包含了来自社区的顶级 AI 模型以及 NVIDIA 开发的模型。

NIM 微服务支持各种 AI 应用,包括大语言模型(LLMs)、视觉语言模型、图像生成、语音处理、基于检索增强生成(RAG)的搜索、PDF 提取和计算机视觉。提供十种面向 RTX 的 NIM 微服务,支持各种应用,包括语言和图像生成、计算机视觉、语音 AI 等。

立即访问 https://www.nvidia.cn/ai/ 开始使用以下 NIM:

  • 语言和推理:Deepseek-R1-distill-llama-8B、Mistral-nemo-12B-instruct 和 Llama3.1-8B-instruct
  • 图像生成:Flux.dev
  • 音频:Riva Parakeet-ctc-0.6B-asr 和 Maxine Studio Voice
  • RAG:Llama-3.2-NV-EmbedQA-1B-v2
  • 计算机视觉和理解:NV-CLIP、PaddleOCR 和 Yolo-X-v1

NIM 微服务还可以通过顶级 AI 生态系统工具和框架提供。

对于 AI 发烧友,AnythingLLM 和 ChatRTX 现在支持 NIM,可以通过简单、友好的用户界面轻松与 LLM 和 AI 智能体聊天。借助这些工具,用户可以创建个性化 AI 助手并集成自己的文档和数据,帮助自动化任务并提高生产力。

对于希望构建、测试和集成 AI 到其应用中的开发者,FlowiseAI 和 Langflow 现在支持 NIM,并提供带有视觉界面的低代码和无代码解决方案,以最低限度的编程专业知识设计 AI 工作流。即将推出对 ComfyUI 的支持。借助这些工具,开发者可以轻松创建复杂的 AI 应用,如聊天机器人、图像生成器和数据分析系统。

此外,Microsoft VS Code AI Toolkit、CrewAI 和 Langchain 现在支持 NIM,并提供将微服务集成到应用代码中的高级功能,有助于确保无缝集成和优化。

NVIDIA AI Blueprint,

提供预构建工作流

NVIDIA AI Blueprint 为 AI 开发者提供了借助 NVIDIA NIM 微服务构建生成式 AI 工作流的先机。

Blueprint(蓝图)是即用、可拓展的参考样本,可以打包所有必要元素(源代码、示例数据、文档和演示应用),以创建和自定义本地运行的高级 AI 工作流。开发者可以修改和拓展 AI Blueprint,以调整其行为、使用不同的模型或实现全新的功能。

PDF 转播客 AI Blueprint 可以将文档转换为音频内容,以便用户可以随时随地学习。通过从 PDF 中提取文本、图像和表格,工作流利用 AI 生成信息丰富的播客。为了更深入地探讨主题,用户可以与由 AI 赋能的播客主持人进行互动式讨论。

借助适用于 Linux 的 Windows 子系统,

在 RTX 上运行 NVIDIA NIM 和 AI Blueprint

使 NIM 微服务能够在 PC 上运行,关键技术之一是适用于 Linux 的 Windows 子系统(WSL)。

微软和 NVIDIA 合作 为 WSL 引入了 CUDA 和 RTX 加速,使在 Windows 上运行优化的、容器化的微服务成为可能。从 PC 和工作站到数据中心和云计算,这使得相同的 NIM 微服务可以随时随地运行。

访问 www.nvidia.cn/ai/,开始在 RTX AI PC 上使用 NVIDIA NIM 和 AI Blueprint。

构建、创造、创新

用于 RTX 的 NVIDIA NIM 微服务 和 AI Blueprint 现已在 www.nvidia.cn/ai/ 提供,为开发者和 AI 发烧友构建 AI 应用提供功能强大、随时可用的工具。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
拉夫罗夫将辞职?扎哈罗娃回应

拉夫罗夫将辞职?扎哈罗娃回应

上观新闻
2026-06-06 14:25:44
A股:全体股民做好心理准备了,后天周一6.8,A股或将再次历史重演!

A股:全体股民做好心理准备了,后天周一6.8,A股或将再次历史重演!

趋势清风侠
2026-06-06 13:49:07
一觉醒来,美股史诗级暴跌

一觉醒来,美股史诗级暴跌

贩财局
2026-06-06 08:13:22
特朗普“官宣”:我和马斯克又成朋友了

特朗普“官宣”:我和马斯克又成朋友了

环球网资讯
2026-06-06 16:07:12
释永信事件发酵!十年前李敖发布的一张对比照再度刷屏,引发热议

释永信事件发酵!十年前李敖发布的一张对比照再度刷屏,引发热议

火山詩话
2026-06-06 10:58:08
“她这么小就有阴德纹了!”小学女生特殊面相火了,家长不简单!

“她这么小就有阴德纹了!”小学女生特殊面相火了,家长不简单!

妍妍教育日记
2026-06-06 10:05:06
事实证明马杜罗政权垮台之后,委内瑞拉人确实更有盼头了

事实证明马杜罗政权垮台之后,委内瑞拉人确实更有盼头了

玲儿爱唱歌
2026-06-04 07:05:24
凌晨,全线暴跌!利空突袭!特朗普,紧急发声

凌晨,全线暴跌!利空突袭!特朗普,紧急发声

证券时报
2026-06-06 08:16:04
上海一酒店将4000只中华蟾蜍端上餐桌,被罚13.5万元!法院:辩称“人工繁育”不能免责

上海一酒店将4000只中华蟾蜍端上餐桌,被罚13.5万元!法院:辩称“人工繁育”不能免责

新民晚报
2026-06-05 19:57:00
6月6日,人社部关于2026年调整退休人员养老金的通知下发了吗?

6月6日,人社部关于2026年调整退休人员养老金的通知下发了吗?

小谈食刻美食
2026-06-06 09:23:19
宇树已成定局:上市成败,都被中国市场抛弃!

宇树已成定局:上市成败,都被中国市场抛弃!

故事终将光明磊落
2026-06-06 11:59:48
网传同济大学大批教师下岗,职称涵盖讲师、副教授、教授?

网传同济大学大批教师下岗,职称涵盖讲师、副教授、教授?

文忆天下
2026-06-03 07:09:35
倒计时3天,中朝将重磅会晤,至少要谈四个方面,打破东北亚僵局

倒计时3天,中朝将重磅会晤,至少要谈四个方面,打破东北亚僵局

铁锤侃侃而谈
2026-06-06 10:41:17
公司一员工从入院到被宣布死亡超过“48小时”26分钟,未被认定工伤 最高法改判了

公司一员工从入院到被宣布死亡超过“48小时”26分钟,未被认定工伤 最高法改判了

红星新闻
2026-06-06 09:44:47
韩财阀按辈分烤肉调酒,黄仁勋桌上写“到此一游”,第2餐吃炸鸡,黄夫人也到场

韩财阀按辈分烤肉调酒,黄仁勋桌上写“到此一游”,第2餐吃炸鸡,黄夫人也到场

红星新闻
2026-06-06 14:09:55
金平日:与金正日争权失败,驻外30年躲过暗杀,因这件事允许回国

金平日:与金正日争权失败,驻外30年躲过暗杀,因这件事允许回国

阿胡
2025-04-03 13:59:42
总决赛G2判罚再引球迷讨伐:最明目张胆的黑哨

总决赛G2判罚再引球迷讨伐:最明目张胆的黑哨

体坛周报
2026-06-06 13:58:19
斩获第4冠后,张镇麟上海合同到期,下家3选1,去哪或看一人脸色

斩获第4冠后,张镇麟上海合同到期,下家3选1,去哪或看一人脸色

萌兰聊个球
2026-06-06 13:21:51
热死人才是开头!印度这座“火焰山”,马上要“炸”了?

热死人才是开头!印度这座“火焰山”,马上要“炸”了?

李云飞Afey
2026-06-05 17:41:50
周末打虎!北京市政协主席魏小东任上被查

周末打虎!北京市政协主席魏小东任上被查

看看新闻Knews
2026-06-06 11:55:01
2026-06-06 17:52:49
NVIDIA英伟达中国 incentive-icons
NVIDIA英伟达中国
英伟达(中国)官方账号
3559文章数 1459关注度
往期回顾 全部

科技要闻

SpaceX与谷歌签署300亿美元算力协议

头条要闻

宗馥莉再出手 自有品牌KELLYONE回归已无"娃哈哈"痕迹

头条要闻

宗馥莉再出手 自有品牌KELLYONE回归已无"娃哈哈"痕迹

体育要闻

上海男篮时隔24年夺冠,恐怖的在后面?

娱乐要闻

33岁男演员金泽去世,曾搭档龚俊

财经要闻

百亿国资绑定,追觅“黑色星期五”背后

汽车要闻

BJ30旅行家完成多路况节油实测 百公里油耗突破5升

态度原创

旅游
手机
艺术
数码
家居

旅游要闻

穿越南美雨林秘境 辰山植物园“美洲奇珍”积水凤梨展启幕

手机要闻

iOS 27系统底层重构代码 老机型提速增续航

艺术要闻

他苦学王羲之50年,写出“书法百科大全”!

数码要闻

外媒改造苹果MacBook Neo,官方彩色零件实现个性外观

家居要闻

雅奢之序 五层别墅

无障碍浏览 进入关怀版