广东
智通财经APP获悉，10月16日，范式智能(06682)联合北京睿思智联科技有限公司(“睿思智联”)宣布，一站式生产级AI部署平台“模域”(ModelSphere)正式上线。该平台面向企业用户免费开源，将算力管理、模型部署和运行优化整合在统一平台，帮助企业降低部署与运维门槛，更高效地将算力转化为安全、稳定、可用于实际业务的AI服务。
随着大模型进入规模化商业阶段，企业在算力统筹、模型部署与效能优化中，普遍面临资源利用率低、芯片生态割裂、部署门槛高、生产环境调优难等问题。模域致力于将这些工作整合为统一的部署与管理流程，减少企业在底层系统适配、资源调度和日常运维上的重复投入，让企业无需深度掌握驱动编译与硬件适配等复杂工作，即可将各类开源大模型嵌入核心业务流程，让技术团队更专注应用开发和业务需求。
模域具备四大核心优势：
1.简化部署，保障模型服务稳定运行：模域提供图形化操作面板和预置部署能力，减少环境配置代码的偏写，帮助开发者快速大模型搭建推理服务，并简化不同芯片集群的。平台内置自动弹性扩缩容、PD分离部署、三级KV缓存、高可用负载均衡及服务断流自动续写等企业级能力，支持模型服务在生产环境中稳定运行。
2.持续自动化调优，提高模型运行效率：平台内置AutoTune智能模型排期策略，以及结合硬件加速能力的自适应负载均衡调度，优化模型处理请求的能力和首次响应速度，系统极限吞吐效率较基准大幅提升约285%，性能跃升至原来4倍，真正实现了算力的“满血”释放。
3.统一管理多种芯片，减少重复适配：平台融合EngineX推理引擎，支持并针对多种算力芯片进行深度调优，可统一和混合调度华为昇腾、天数智芯、摩尔线程、海光DCU等国产算力资源，用户无需为不同芯片重写底层逻辑代码。
4.持续优化适配主流模型，加快部署应用：模域团队持续跟进开源社区迭代，已适配优化了DeepSeek-V4/V4-Flash、Qwen、Kimi、MiniMax、GLM等主流模型，支持在模型发布后快速部署并且性能调优至生产环境，帮助企业将新模型落地实际业务。
模域在AI技术栈中的定位
在技术层面上，模域与vLLM、SGLang等推理引擎互相配合：推理引擎负责提升单台服务器的计算效率，模域则负责集群架构级纳管和优化，包括负载和缓存感知的请求路由、统一的KV缓存池、基于服务质量的自动化扩缩容、服务断流自动续写、基于线上数据的自动化性能调优、运行监控及服务管理等，保证生产环境下系统的高性能和高可用。
模域全面开源，将大模型部署与优化的工程能力向更多企业和开发者开放，同时汇聚产业力量，持续完善对不同芯片和模型的支持，减少硬件适配障碍，降低大模型应用门槛，帮助企业用好已有算力，高效释放异构算力的商业潜能。
模域采用宽松的Apache 2.0 协议，已在GitHub上线：https://github.com/modelsphere/modelsphere
特别声明：以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布，本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.
