网易首页 > 网易号 > 正文 申请入驻

合合信息推出多模态文本智能技术落地方案,助力AI实现智能推理

0
分享至

随着人工智能深入各行各业,多模态大模型正在成为AI发展的重要方向之一。近期,由中国图象图形学学会、中国人工智能学会、中国计算机学会和中国自动化学会联合主办,上海交通大学承办的第八届中国模式识别与计算机视觉学术会议(PRCV 2025)顺利举行。大会期间,“多模态文本智能大模型前沿技术与应用”论坛(简称“论坛”)获得了广泛关注。论坛汇集了来自华南理工大学、哈尔滨工业大学、南开大学、华中科技大学、小红书及合合信息技术团队的顶尖专家与学者,深入探讨多模态文本智能领域的最新技术突破与场景应用案例。

图说:中国图象图形学学会(CSIG)常务理事、

华南理工大学教授金连文致辞

如同人类需要同时调用视觉、听觉、触觉等多感官来全面地理解外部世界,大模型也需要综合处理文字、图片、表格等文本信息后做出判断。“实战”应用标准对大模型的多模态内容深度整合能力提出了新的要求,语义割裂、场景理解局限、决策失误等常见的模型缺陷制约了其在行业中的应用发展。合合信息在论坛期间推出“多模态文本智能技术”方案,该方案可通过文本相关空间位置理解深层语义逻辑,实现对多模态信息的“立体化综合化理解”,赋予模型真正的文本“阅读理解”能力。

文本智能技术助力解决多模态AI应用难题

多模态指利用多种不同形式或感知渠道的信息进行表达、交流和理解的方式,数据模态包括文本、图像、音频、视频等。2025年Gartner人工智能技术成熟度曲线显示,多模态AI将在未来五年成为各行业提升所有应用和软件产品功能的核心技术。围绕多模态大模型性能优化及行业应用等问题,论坛嘉宾开展了一场深刻的讨论。

为了助力大模型实现跨越模态的推理能力,哈尔滨工业大学计算学部长聘教授、博士生导师车万翔重点分享了“多模态思维链”技术,该技术将推理逻辑分解为一系列可解释的跨模态推理步骤,最终生成更为精准和可靠的结论。除了帮助大模型理清逻辑,解决“胡编乱造”问题也是提升AI能力的重要方向。南开大学教授周宇介绍了一种系统化的OCR幻觉缓解方案,为多模态大模型的可视文本感知能力提升提供了有效路径。

图说:哈尔滨工业大学计算学部长聘教授、

博士生导师车万翔教授进行主题分享

图说:南开大学教授周宇进行主题分享

真实的应用场景是技术不断迭代更新的动力。论坛现场,合合信息图像算法研发总监郭丰俊重点分享了文本智能技术的创新应用,帮助用户解决复杂场景下的文档图像问题。小红书hi lab团队算法工程师燕青结合行业实践,分享了一款基于单视觉语言模型的多语言文档布局解析工具“dots.ocr”。

图说:合合信息图像算法研发总监郭丰俊进行主题分享

图说:小红书hi lab团队算法工程师燕青进行主题分享

除了商业应用,在文保领域,多模态大模型也发挥出了巨大价值。华中科技大学教授刘禹良在主题演讲中介绍了首个覆盖甲骨文专家破译全流程的辅助考释框架AlphaOracle,通过人类工作流启发的音形义理破译流程,实现字形分析、拓片用法总结和传世文献做证的思路,成功在“劳”等字的辅助破译上取得突破。

图说:华中科技大学教授刘禹良进行主题分享

多模态文本智能技术构建“感知-认知-决策”技术新范式

从文字、图像到视频,无论模态如何演变,其所承载的文本信息始终是AI理解世界的基座。实现具备自主感知、认知与决策能力的通用人工智能(AGI),首要前提是让机器充分理解作为知识载体的“文本”。基于此,合合信息推出了“多模态文本智能技术”方案,将技术处理对象从传统的文档(如PDF、Word等格式文件)延伸至多种承载文本信息的媒介,无论是论文、财报还是视频、自然场景,都能成为系统的理解对象。

在传统的文档处理技术中,“如何准确地提取信息”是重点关注方向。然而在真实业务场景中,信息往往以多模态组合形态存在,例如财报的数据需对照表格验证,国家标准文件中的插图依赖图例说明。为了解决多模态信息的协同解读需求,方案建立了从复杂场景文本感知到深层语义理解的技术闭环,让AI不仅能够“看清”文本,更能够理解其布局关联,解决不同模态间的信息割裂问题。

目前,“多模态文本智能技术”方案已将文本智能认知程度从语义理解拓展到类人推理及自主机器决策,形成了从感知到认知再到决策的技术实现路径。相较于传统的文档解析、识别系统,该方案让系统具备了更接近人类判断逻辑的自主决策能力,在完成对多模态信息的感知和理解后,能够根据用户意图,做出正确的决策。

随着多模态大模型融入产业进程,行业对AI系统的需求正从“功能实现”向“业务赋能”深化。合合信息“多模态文本智能技术”方案旨在推动AI系统从辅助工具进化为具备自主决策能力的业务伙伴,提升其在复杂场景中展现出的问题分析、决策思维及端到端解决问题的能力。方案已在金融、医药、教育等专业领域开展应用,通过对复杂文本的精准感知、综合理解和可靠决策,实现对业务流程的智能重构。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
美国佛州取消机场清真寺特权,川普:他们对美国发动圣战

美国佛州取消机场清真寺特权,川普:他们对美国发动圣战

移光幻影
2026-08-17 10:27:50
台海局势彻底变天!不靠和统不靠武统?大陆全新统一模式,让台独彻底绝望

台海局势彻底变天!不靠和统不靠武统?大陆全新统一模式,让台独彻底绝望

怪味历史连连看
2026-08-17 20:38:42
没想到,让欧洲人破防的,不是中国宏伟建筑,而是街头免费的公厕

没想到,让欧洲人破防的,不是中国宏伟建筑,而是街头免费的公厕

混沌录
2026-08-17 22:39:04
创业板指跌逾2%,全市场下跌个股超4000只

创业板指跌逾2%,全市场下跌个股超4000只

界面新闻
2026-08-18 11:12:18
董路怒怼黑粉:一场直播赚48万!孙贼羡慕吗?曝吕孟洋或签约巴萨

董路怒怼黑粉:一场直播赚48万!孙贼羡慕吗?曝吕孟洋或签约巴萨

念洲
2026-08-18 12:34:20
网传某互联网平台公司大面积裁员,16000名销售团队年内裁掉10000人,而且还不是终极目标

网传某互联网平台公司大面积裁员,16000名销售团队年内裁掉10000人,而且还不是终极目标

Mr王的饭后茶
2026-08-17 22:52:07
诸葛亮《出师表》残稿出土,揭露书法用笔奥秘, 字已经失传

诸葛亮《出师表》残稿出土,揭露书法用笔奥秘, 字已经失传

幸福娃书画苑
2025-10-04 10:53:55
731部队从来没有消失,它寄生到了另一个国家,只是换了一个名字

731部队从来没有消失,它寄生到了另一个国家,只是换了一个名字

古史青云啊
2026-08-03 14:18:28
1962年,毛泽东设宴款待溥仪,席间突然发问:你们御膳房的饭菜,到底好不好吃?溥仪是如何回答的?

1962年,毛泽东设宴款待溥仪,席间突然发问:你们御膳房的饭菜,到底好不好吃?溥仪是如何回答的?

人生录
2026-08-08 00:05:22
北京公安823人拟录:三校垄断94%

北京公安823人拟录:三校垄断94%

朗威谈星座
2026-08-18 09:16:53
泽连斯基给某人的公开信(全文)

泽连斯基给某人的公开信(全文)

金召点评
2026-06-08 14:00:34
国乒输麻了之后,王励勤甩出16人名单:输可以,但不能没人接班

国乒输麻了之后,王励勤甩出16人名单:输可以,但不能没人接班

刘哥谈体育
2026-08-18 10:21:36
容祖儿背后的两个男人

容祖儿背后的两个男人

文刀万
2026-08-18 06:00:24
李书福正式辞任!背后的信号不简单!

李书福正式辞任!背后的信号不简单!

大佬灼见
2026-08-18 11:57:24
43岁范冰冰受封拿督,事业疑获新大佬支持,全面进军海外市场

43岁范冰冰受封拿督,事业疑获新大佬支持,全面进军海外市场

萌神木木
2025-08-24 13:52:35
养老金进退两难!专家说出实在话,调整领取年龄会是出路吗?

养老金进退两难!专家说出实在话,调整领取年龄会是出路吗?

白米饭怎么吃
2026-08-17 21:35:48
马斯克:不要担心别人会超过你——因为多数人,连"坚持"这一关都过不了

马斯克:不要担心别人会超过你——因为多数人,连"坚持"这一关都过不了

杏花烟雨江南的碧园
2026-08-14 16:15:03
A股:集合竞价是史上唯一不坑人的指标,字字精华,不懂就别炒股!

A股:集合竞价是史上唯一不坑人的指标,字字精华,不懂就别炒股!

股经纵横谈
2026-08-01 19:40:20
许家印突发消息

许家印突发消息

新行情
2026-08-18 15:02:35
王传福提前放狠话!比亚迪全新电机一出,车企要重新洗牌

王传福提前放狠话!比亚迪全新电机一出,车企要重新洗牌

周哥一影视
2026-08-17 15:17:32
2026-08-18 16:03:00
21世纪经济报道 incentive-icons
21世纪经济报道
中国商业新闻领导者
266854文章数 744998关注度
往期回顾 全部

科技要闻

特斯拉Cybercab有望本月投放运营

头条要闻

男子帮雇主独守深山老宅20余年:没手机 冬天烧火取暖

头条要闻

男子帮雇主独守深山老宅20余年:没手机 冬天烧火取暖

体育要闻

中国男篮,一直被质疑,永远被期待

娱乐要闻

郭德纲风波再升级!德云社跟着遭殃

财经要闻

许家印,崩了东北富二代42个亿

汽车要闻

一条视频读懂华为乾崑WEWA 2.0架构核心:WA世界行为模型

态度原创

教育
时尚
旅游
本地
房产

教育要闻

官宣!北京高考状元回人大附任教,正在“开辟新赛道”

夏天裤子不要总穿黑色,试试粉色阔腿长裤,舒适显瘦又有个性

旅游要闻

扬帆仲夏游琴岛,碧海银滩共——致广大市民和游客朋友的倡议书

本地新闻

邂逅活珊瑚的西沙,感受独属于国人的浪漫

房产要闻

又又又狂抢207轮!海口土拍,彻底爆了!

无障碍浏览 进入关怀版