NVIDIA 的开放模型系列,包括面向数字 AI 的 NVIDIA Nemotron、面向物理 AI 的 Cosmos、面向机器人开发的 Isaac GR00T 以及面向生物医学 AI 的 Clara,为开发者提供了为现实世界应用构建专用智能体的基础。
![]()
NVIDIA 秉持对开源的长期承诺,推出了面向语言、机器人和生物学的全新开源 AI 技术,为构建开源生态系统做出贡献,扩展 AI 的普及并推动创新。NVIDIA 正将这些模型、数据和训练框架贡献给 Hugging Face,让 AI 研究和开发更加易于获取。
NVIDIA Nemotron 为专业 AI 智能体带来更高效的推理能力:AI 智能体使用多种模型来查看、检索、生成和推理。NVIDIA Nemotron 系列的最新开放模型统一了这些功能,使开发者能够构建专业化的智能体。
- Nemotron Nano 3 使用混合专家架构,提高软件开发、客户服务和 IT 支持等领域的推理吞吐量。
- Nemotron Nano 2 VL 提供文档智能、图像推理和视频分析。
- Nemotron Parse 从文档中提取文本和表格,以获取可操作的信息。
- Nemotron Safety Guard 增加了具有文化意识的多语言调节功能,可在九种语言里检测 23 个安全类别的有害内容。
- Nemotron 检索增强生成 (RAG) 模型现在具有高级文档提取特征,并可跨文本、图像、音频和视频数据源进行统一检索。
NVIDIA 还发布了全新的开源 Nemotron 数据集,包含多模态训练、多语言角色和保护隐私型合成个人信息,供专业模型开发使用。
Cosmos 和 Isaac GR00T 开放模型及数据用于物理 AI 和机器人开发领域:为加速具备类人推理和认知能力的机器人系统训练,NVIDIA 对其物理 AI 开放模型做出了重大更新,包括 Cosmos 世界基础模型和 Isaac GR00T 机器人基础模型:
- Cosmos Predict 2.5:将三种模型统一为一种模型,用于快速世界仿真,单帧即可生成 30 秒视频。
- Cosmos Transfer 2.5:从 3D 场景中生成更高质量、逼真的数据,且大小仅为 Cosmos Transfer 1 的三分之一。
- Cosmos Reason:推理视觉语言模型,现已作为 NVIDIA NIM 提供,用于高级多模态理解。
- Cosmos 数据集搜索:支持即时检索训练场景,将后训练周期从数月缩短到数天。
- Isaac GR00T N 1.6:增强人形机器人的推理、泛化和全身控制能力。
面向医疗与生命科学的 NVIDIA Clara 开放模型:NVIDIA Clara 系列迎来全新开放模型,该系列包含专为加速科学发现、分析医学图像等而建的模型、工具和方案,其中包括:
- Clara CodonFM:研究 RNA 规律,揭示其编码变化如何改善治疗和药物设计。NVIDIA 将把 CodonFM 等开放模型贡献给 Chan Zuckerberg Initiative (CZI) 的虚拟细胞平台,从而加速开源协作和模型评估的发展。
- Clara La-Proteina:以以往模型两倍的长度和复杂性逐原子创建 3D 蛋白质结构,实现更好的药物、酶和材料的设计。
- Clara Reason:一种能够进行链式推理的视觉语言模型,专为放射学和医疗影像设计,推动可解释 AI 医学研究。
以上为摘要内容,点击链接阅读完整内容:NVIDIA 发布开放模型和数据,加速语言、生物学和机器人领域的 AI 创新 | NVIDIA 英伟达博客 NVIDIA 引领人工智能计算
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.