品玩7月9日讯,据Techtimes 报道,Meta AI推出被称为 MobileLLM 的紧凑型AI模型,尽管参数较少,但它与其他人工智能模型一样有效,使其在计算能力较弱的智能手机上也能发挥作用。
MobileLLM 的研究团队来自 Meta Reality Labs、PyTorch 和 Meta AI study的研究人员,他们专注于优化参数少于十亿的模型。MobileLLM 强调模型深度而非广度、整合嵌入共享和分组查询关注,以及采用革命性的即时分块权重共享方法。
这些设计决策使得 MobileLLM 在典型的基准工作负载上比之前的同类模型高出 2.7% 到 4.3%。
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.