网易首页 > 网易号 > 正文 申请入驻

微软 Phi-4 多模态及迷你模型上线,语音视觉文本全能

0
分享至

IT之家 2 月 27 日消息,微软于 2024 年 12 月发布了 Phi-4,这是一款在同类产品中表现卓越的小型语言模型(SLM)。今日,微软进一步扩展 Phi-4 家族,推出了两款全新模型:Phi-4 多模态(Phi-4-multimodal)和 Phi-4 迷你(Phi-4-mini)。

Phi-4 多模态模型是微软首款集成语音、视觉和文本处理的统一架构多模态语言模型,参数量达 56 亿。在多项基准测试中,Phi-4 多模态的表现优于其他现有的先进全模态模型,例如谷歌的 Gemini 2.0 Flash 和 Gemini 2.0 Flash Lite。

在语音相关任务中,Phi-4 多模态在自动语音识别(ASR)和语音翻译(ST)方面超越了 WhisperV3 和 SeamlessM4T-v2-Large 等专业语音模型。微软表示,该模型在 Hugging Face OpenASR 排行榜上以 6.14% 的词错误率位居榜首。

在视觉相关任务中,Phi-4 多模态在数学和科学推理方面表现出色。在文档理解、图表理解、光学字符识别(OCR)和视觉科学推理等常见多模态能力方面,该模型与 Gemini-2-Flash-lite-preview 和 Claude-3.5-Sonnet 等流行模型相媲美甚至超越。

IT之家注意到,Phi-4 迷你模型则专注于文本任务,参数量为 38 亿。其在文本推理、数学计算、编程、指令遵循和函数调用等任务中表现优异,超越了多款流行的大型语言模型。

为确保新模型的安全性和可靠性,微软邀请了内部和外部安全专家进行测试,并采用了微软人工智能红队(AIRT)制定的策略。经过进一步优化后,Phi-4 迷你和 Phi-4 多模态模型均可通过 ONNX Runtime 部署到设备端,实现跨平台使用,适用于低成本和低延迟场景。

目前,Phi-4 多模态和 Phi-4 迷你模型已在 Azure AI Foundry、Hugging Face 和 NVIDIA API 目录中上线,供开发者使用。

Phi-4 系列新模型的推出,标志着高效 AI 技术的重大进步,为各类人工智能应用带来了强大的多模态和文本处理能力。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
全线失守!29 枚弹道导弹突破乌防空,基辅五大无人机工厂被炸毁

全线失守!29 枚弹道导弹突破乌防空,基辅五大无人机工厂被炸毁

离离言几许
2026-07-09 19:04:49
土木工程再引热议!清华以前的王牌专业,现在一个专业方向只招1-2个人

土木工程再引热议!清华以前的王牌专业,现在一个专业方向只招1-2个人

火山詩话
2026-07-09 08:51:10
广东新娘和堂姐互撕后续:新娘私下道歉,堂姐曝完整经过,不原谅

广东新娘和堂姐互撕后续:新娘私下道歉,堂姐曝完整经过,不原谅

另子维爱读史
2026-07-09 21:37:43
日媒关注:特朗普称“日本伊斯兰共和国发射了导弹”

日媒关注:特朗普称“日本伊斯兰共和国发射了导弹”

参考消息
2026-07-09 12:45:13
0-2落后时,全世界都以为阿根廷完了!恩佐一句话,点破逆转秘诀

0-2落后时,全世界都以为阿根廷完了!恩佐一句话,点破逆转秘诀

刘哥谈体育
2026-07-09 06:58:26
塔图姆被直播逼问: 詹姆斯穿绿军球衣?

塔图姆被直播逼问: 詹姆斯穿绿军球衣?

篮坛第一线
2026-07-10 00:58:49
荷兰全都要:既想要向中国卖DUV光刻机,又想把安世半导体拿到手

荷兰全都要:既想要向中国卖DUV光刻机,又想把安世半导体拿到手

王新喜
2026-07-09 21:50:18
25岁女同事合租天天穿真丝睡衣晃,我忍了21天,第22天把她按墙上

25岁女同事合租天天穿真丝睡衣晃,我忍了21天,第22天把她按墙上

真实人物采访
2026-07-08 18:10:03
资产27亿的哈兰德,从小是单亲母亲带大,父亲再婚娶跨栏运动员

资产27亿的哈兰德,从小是单亲母亲带大,父亲再婚娶跨栏运动员

全球时尚号
2026-07-07 18:55:25
失踪737已确认坠毁

失踪737已确认坠毁

新浪财经
2026-07-10 00:44:53
协和林博士一席话点醒无数人:晚年尊严,全靠一身筋骨撑住

协和林博士一席话点醒无数人:晚年尊严,全靠一身筋骨撑住

青苹果sht
2026-06-30 05:50:59
欧洲2队晋级世界杯4强!阿根廷+摩洛哥若同时出局,改写96年历史

欧洲2队晋级世界杯4强!阿根廷+摩洛哥若同时出局,改写96年历史

侃球熊弟
2026-07-09 19:00:27
带老外插队被拘!北京这导游卑躬屈膝的样子,暴露了多少人的奴性

带老外插队被拘!北京这导游卑躬屈膝的样子,暴露了多少人的奴性

从零到一研究所
2026-07-09 14:01:28
世界杯炸锅!阿森纳名宿开炮!阿根廷绝杀进球本应取消

世界杯炸锅!阿森纳名宿开炮!阿根廷绝杀进球本应取消

澜归序
2026-07-09 08:47:49
算力租赁要变天了

算力租赁要变天了

远川科技评论
2026-07-08 23:40:23
印尼请来印度接盘镍矿:杀猪盘徒弟遇上祖师爷,到底谁坑谁?

印尼请来印度接盘镍矿:杀猪盘徒弟遇上祖师爷,到底谁坑谁?

王新喜
2026-07-09 06:36:13
双雄的黄昏:为何梅西能盘活全队,C罗却沦为禁区孤塔?

双雄的黄昏:为何梅西能盘活全队,C罗却沦为禁区孤塔?

智道足球
2026-07-09 22:30:55
CCTV5直播摩洛哥VS法国,开球时间确定,阿根廷人主裁,谁能进4强

CCTV5直播摩洛哥VS法国,开球时间确定,阿根廷人主裁,谁能进4强

体育大学僧
2026-07-09 10:40:30
朱高炽在位不足一年 ,为何能青史留名?他解决了三个天大的难题

朱高炽在位不足一年 ,为何能青史留名?他解决了三个天大的难题

千秋文化
2026-01-21 20:55:53
广西大雨炸出一堆“牛鬼神蛇”,捐款名单曝光,韩红热巴让人意外

广西大雨炸出一堆“牛鬼神蛇”,捐款名单曝光,韩红热巴让人意外

趣文说娱
2026-07-08 06:35:21
2026-07-10 01:43:00
IT之家
IT之家
爱科技,爱这里 - 前沿科技人气平台
354088文章数 607343关注度
往期回顾 全部

科技要闻

字节杀回来了!深度实测Seedream 5.0 Pro

头条要闻

洪水卷来眼镜蛇广西60岁老人被咬去世 全村仍然在搜蛇

头条要闻

洪水卷来眼镜蛇广西60岁老人被咬去世 全村仍然在搜蛇

体育要闻

王楚谈埃及判罚争议:足球没有绝对公平

娱乐要闻

陈翔发文“苍天饶过谁”登热搜,旧事再引关注

财经要闻

中国房地产十年

汽车要闻

悦己更悦人 阿维塔07L加长了更加上了豪华

态度原创

游戏
房产
本地
健康
军事航空

魔兽世界:时光服虚空之花引争议,一键宏还是外挂,玩家意见不一

房产要闻

猛踩油门!绿地,又拿下海南一个大城更!

本地新闻

重庆人有自己的避暑桃花源 | 夏天就去「酉」风的地方!

三高、肥胖人群能吃粘食吗?

军事要闻

四川舰甲板全貌完整亮相 专家:离正式交付不远

无障碍浏览 进入关怀版