网易首页 > 网易号 > 正文 申请入驻

Dify解锁并行处理,四种模式助你玩转复杂工作流!

0
分享至

点击下方“JavaEdge”,选择“设为星标”

第一时间关注技术干货!


免责声明~ 任何文章不要过度深思! 万事万物都经不起审视,因为世上没有同样的成长环境,也没有同样的认知水平,更「没有适用于所有人的解决方案」; 不要急着评判文章列出的观点,只需代入其中,适度审视一番自己即可,能「跳脱出来从外人的角度看看现在的自己处在什么样的阶段」才不为俗人。 怎么想、怎么做,全在乎自己「不断实践中寻找适合自己的大道」

0 前言

Dify Workflow 因其用户友好的设置和强大的功能而广受欢迎。然而,之前的版本以串行方式执行各个步骤,等待每个节点完成后再转到下一个节点。虽提供清晰结构,但这会降低复杂任务的处理速度,增加延迟和响应时间。

Dify v0.8.0 通过引入并行处理功能解决了这些限制。Workflow 现在可以并发执行多个分支,从而能够同时处理不同的任务。这显著提高了执行效率,使 LLM 应用程序能够更快、更灵活地处理复杂的工作负载。

创建并行分支

要在工作流中定义并行分支:

  1. 将鼠标悬停在节点上

  2. 点击出现的 + 图标

  3. 添加不同的节点类型

各个分支将并行执行并合并其输出。请参阅文档以获取详细说明。

工作流包含多种并行场景。可尝试使用这些场景来加快流程。如已在早期版本构建工作流,请考虑用并行模式重构,提高性能。

1 简单并行

基本场景,可从一个固定节点(如起始节点)创建多个并行分支。可同时处理类似的子任务,如翻译或模型比较。

模型比较工作流程中的简单并行性:

https://framerusercontent.com/assets/CSv597nulCSy0uNXY95cOnpeY.mp4

2 嵌套并行

允许在工作流中实现多层级并行结构。从初始节点开始,工作流分支出多个并行路径,每个路径包含各自的并行流程。“科学写作助手”示例展示了两个嵌套层级:

第一级(框 1):从问题分类器中,出现了两个主要分支: a.概念解释(框 1) b. 处理偏离主题的对话(“拒绝闲聊”分支)

概念解释(concept explanation)分支(框1)包括:

  • 隐喻和类比分支可增强概念理解

  • 主题提取 | 第二级嵌套(框 2)用于详细的概念分析和内容生成

  1. 第二级(框 2):主题提取分支执行两个并行任务: a. 提取主题并搜索(提取主题 -> Serper)获取背景信息 b.提取主题并生成学习计划(学习计划->参数提取器->TavilySearch)

这种多层嵌套并行结构非常适合诸如深入概念分析和科学传播内容创作等复杂、多阶段的任务。它能够同时处理不同的概念层面,包括基本解释、类比、背景研究和学习计划,从而提高处理效率和输出质量。

3 迭代并行

涉及循环结构内的并行处理。“股票新闻情绪分析”演示这种方法:

设置:搜索并提取特定股票的多个新闻 URL。

  • 迭代处理:对于每个 URL,并行执行: a.内容检索:使用 JinaReader 抓取并解析网页内容 b. 观点提取:使用参数提取器识别乐观和悲观的观点 c. 观点总结:使用两个独立的 LLM 模型同时总结乐观和悲观的观点

  • 合并结果:将所有发现合并到一张表中。

  • 该方法能够高效处理海量新闻文章,从多个角度分析情绪,帮助投资者做出明智的决策。迭代中的并行处理能够加速具有相似数据结构的任务,从而节省时间并提升性能。

    4 条件并行

    条件分支并行根据条件运行不同的并行任务分支。“面试准备助手”示例展示了此设置:

    主要条件(IF/ELSE 节点):根据 dialog_count 拆分流程: a. 第一次对话:确认面试职位和公司 b. 后续对话:进入更深层次的处理

  • 次要条件(IF/ELSE 2 节点):在后续对话中,根据现有的公司信息和面试问题进行分支: a. 缺少公司信息:运行并行任务来搜索公司、抓取网页、汇总公司信息 b. 缺少面试问题:并行生成多个问题

  • 并行任务执行:对于问题生成,多个 LLM 节点同时启动,每个节点创建不同的问题

  • 这种 IF/ELSE 结构允许 Workflow 根据当前状态和需求灵活地运行不同的并行任务。(问题分类器节点可以实现类似的功能。)这在保持有序的同时提高了效率。它适用于需要根据各种条件同时执行复杂任务的情况,例如本面试准备流程。

    5 受益于工作流并行

    这四种并行方法(简单、嵌套、迭代和条件)提升了 Dify Workflow 的性能。它们支持多模型协作,简化复杂任务,并动态调整执行路径。这些升级提升了效率,拓宽了应用范围,更好地处理棘手的工作情况。您可以在探索页面的配套模板中快速试用这些新功能。 Dify将继续增强 Workflow,提供更强大、更灵活的自动化解决方案。令人期待!

    本文已收录在Github,关注我,紧跟本系列专栏文章,咱们下篇再续!

    • 魔都架构师 | 全网30W技术追随者

    • 大厂分布式系统/数据中台实战专家

    • 主导交易系统百万级流量调优 & 车联网平台架构

    • AIGC应用开发先行者 | 区块链落地实践者

    • 以技术驱动创新,我们的征途是改变世界!

    • 实战干货:编程严选网

    加我好友,一起AI探索交流!

    特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

    Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

    相关推荐
    热点推荐
    小李子打破35年铁律!首次接拍续集

    小李子打破35年铁律!首次接拍续集

    赴一场山海啊
    2026-07-12 01:31:56
    “饭碗没了,开心吗?”老人炫耀儿子儿媳工作,遭邻居举报成功!

    “饭碗没了,开心吗?”老人炫耀儿子儿媳工作,遭邻居举报成功!

    林林先生
    2026-07-11 07:55:03
    唯一盟友航母撤离!霍尔木兹只剩美国航母

    唯一盟友航母撤离!霍尔木兹只剩美国航母

    看看新闻Knews
    2026-07-12 11:12:17
    暑假5个习惯正在“毁掉”大脑前额叶,90%的孩子都踩坑了

    暑假5个习惯正在“毁掉”大脑前额叶,90%的孩子都踩坑了

    蓁蓁心理抚养
    2026-07-12 12:30:05
    俄乌战争的拐点来了

    俄乌战争的拐点来了

    报人刘亚东
    2026-07-12 10:48:50
    7月机场严查登机箱!别再带20寸箱乱走,登机口补钱最少200

    7月机场严查登机箱!别再带20寸箱乱走,登机口补钱最少200

    三农老历
    2026-07-11 20:29:15
    新式诈骗来了,不问密码不问验证码,只让你说一句,不是本人操作

    新式诈骗来了,不问密码不问验证码,只让你说一句,不是本人操作

    小虎新车推荐员
    2026-07-12 02:21:04
    为什么电车好像一下就解决了底盘问题?背后的原因,并不是黑科技

    为什么电车好像一下就解决了底盘问题?背后的原因,并不是黑科技

    沙雕小琳琳
    2026-07-13 00:37:03
    我说愿拿390万底薪,你们就当真了?骑士的态度可能坑了全联盟

    我说愿拿390万底薪,你们就当真了?骑士的态度可能坑了全联盟

    老梁体育漫谈
    2026-07-13 00:07:43
    多名演员发文抵制!上海业内人士叹息:很悲哀,收入猛降八成,几乎成“免费劳动力”

    多名演员发文抵制!上海业内人士叹息:很悲哀,收入猛降八成,几乎成“免费劳动力”

    犀利辣椒
    2026-07-13 06:21:42
    冉莹颖再曝猛料:赔光2亿只是开始,她和邹市明已分居三年,曾三次闹分手……

    冉莹颖再曝猛料:赔光2亿只是开始,她和邹市明已分居三年,曾三次闹分手……

    TVB的四小花
    2026-07-12 14:50:02
    “我对他没有一点母爱了!”妈妈直言厌恶3岁儿子,网友一反常态

    “我对他没有一点母爱了!”妈妈直言厌恶3岁儿子,网友一反常态

    妍妍教育日记
    2026-07-10 08:45:08
    又一个“特别军事行动”诞生了

    又一个“特别军事行动”诞生了

    辇毂
    2026-07-12 11:01:40
    790万美元,全额保障合同体现德安德烈·乔丹对鹈鹕队的巨大价值

    790万美元,全额保障合同体现德安德烈·乔丹对鹈鹕队的巨大价值

    好火子
    2026-07-13 04:51:35
    倒计时!詹姆斯预计本周做出“决定4”签约 骑士领衔5大热门下家

    倒计时!詹姆斯预计本周做出“决定4”签约 骑士领衔5大热门下家

    醉卧浮生
    2026-07-13 01:40:01
    史上首次!2026年一季度全国无一省份实现财政自平衡

    史上首次!2026年一季度全国无一省份实现财政自平衡

    大江看潮
    2026-07-09 08:13:10
    曼城拒绝7500万英镑报价,世界杯后谈判加速

    曼城拒绝7500万英镑报价,世界杯后谈判加速

    甜份超标的我
    2026-07-13 00:17:35
    “这么小就有阴德纹,她的家长不简单!”小学女生面相走红

    “这么小就有阴德纹,她的家长不简单!”小学女生面相走红

    泽泽先生
    2026-07-11 15:40:54
    大家发现没有?油车跑1000公里要500块,电车跑1000公里呢?

    大家发现没有?油车跑1000公里要500块,电车跑1000公里呢?

    正直小墨
    2026-07-12 17:39:57
    雅金:裁判本来不该给阿根廷黄牌,他用自己的错误惩罚了我们

    雅金:裁判本来不该给阿根廷黄牌,他用自己的错误惩罚了我们

    懂球帝
    2026-07-13 01:35:08
    2026-07-13 07:35:00
    JavaEdge incentive-icons
    JavaEdge
    Java 技术
    499文章数 458关注度
    往期回顾 全部

    科技要闻

    苹果诉OpenAI细节:一句“笑死”刺痛库克

    头条要闻

    朝鲜宣布对特大腐败分子的判决 金正恩亲自出席会议

    头条要闻

    朝鲜宣布对特大腐败分子的判决 金正恩亲自出席会议

    体育要闻

    被3个队友锁死,哈兰德以最憋屈的方式出局

    娱乐要闻

    台媒曝S妈许雅钧 诱使具俊晔放弃遗产

    财经要闻

    穿越算力恐慌:下半年AI科技的五大主线

    汽车要闻

    纯电/增程双动力 一汽悦意08正式上市售9.99万起

    态度原创

    数码
    家居
    时尚
    公开课
    军事航空

    数码要闻

    太疯狂了!AMD要上FSR 8倍多帧生成:反超NVIDIA、Intel

    家居要闻

    2026建博会(广州) 公装联探展交流活动

    在离婚边缘疯狂试探,她真打算不过了?

    公开课

    李玫瑾:为什么性格比能力更重要?

    军事要闻

    伊朗宣布关闭霍尔木兹海峡:直至美国停止干涉该地区

    无障碍浏览 进入关怀版