网易首页 > 网易号 > 正文 申请入驻

5699次测试0失败:这支25人AI团队把QA逼到无事可做

0
分享至


358个测试文件,5699条用例,全部通过。没有存根,没有延期,没有跳过场景。

这不是某家大厂的年度汇报,而是一个11人冲刺周期的UAT(用户验收测试)终验报告。更反常的是,整个平台由25个AI智能体搭建完成,人类只负责按验收键。

从28个失败文件到零缺陷

UAT启动当天,团队发现28个测试文件报错。其中24个是Sprint 11的端到端测试,用了自定义运行模式——原始异步函数配process.exit(),Vitest根本识别不了。

批量转换,统一格式,修复三处隐藏问题。358个文件、5699条测试全部绿灯。

这个数字的残酷之处在于:它证明AI生成的代码不需要人类兜底。

20个用户故事,约70张工单,全部交付。每个故事都附带具体验收证据,不是"看起来能跑",而是可复现的测试记录。

平台现已接入5个真实运营渠道:LinkedIn、Twitter/X、Facebook、Instagram、Medium。后台跑通RSS内容抓取、信任评分质量门、人机回环审核队列、知识图谱、品牌声线合规、引用验证、可观测仪表盘——全是生产环境,全是真实API调用。


ORCHESTRATE方法论:给AI戴紧箍咒

这套系统的核心约束叫ORCHESTRATE。名字听着像企业培训课,实际是一组结构化规则:消除歧义,把精力逼向质量。

每张工单走文档驱动TDD(测试驱动开发)。每个用户故事带验收标准。每个阶段留证据。没有"差不多行了",没有"下次再补"。

传统开发里,UAT是救火现场。这里UAT成了形式确认——问题早在前面10个冲刺被AI自己修完了。

人类团队的角色被压缩成两件事:写清楚要什么,验收时签字。

5个渠道背后的技术栈

平台架构没有为了演示而裁剪。RSSFeed接入内容源,信任评分过滤低质信息,人机回环(HITL)队列处理边界案例,知识图谱维护实体关系,品牌声线合规检查确保输出调性一致,引用验证防止AI幻觉,可观测仪表盘实时追踪25个智能体的健康状态。

所有组件都有测试覆盖。不是单元测试那种自欺欺人的绿条,是端到端的真实数据流验证。

一个细节:24个失败文件的修复是"批量操作"完成的。意味着AI智能体可以被程序化地批量修正,不需要人类逐行Review。这在传统软件工程里几乎不可想象——你让初级工程师批量改24个文件,产出的技术债能还到明年。

QA这个职业正在经历什么

5699条测试零失败的另一面,是QA团队的工作性质剧变。他们不再写测试用例、不再复现Bug、不再跟开发扯皮优先级。

新的工作流是:人类定义验收标准 → AI生成测试 → AI执行测试 → 人类确认结果。QA的精力从"找问题"转向"定义什么算问题"。

这个转变的代价是清晰的。团队没提具体人数,但"11人冲刺周期"完成25智能体协作的平台,暗示人力配置远低于传统同等规模项目。

文档里反复出现的词是"证据"。每个阶段要证据,每个故事要证据,每次部署要证据。这不是官僚作风,是给AI设的死线——没有证据,智能体无法推进到下一阶段。

当机器开始自我验证,人类的验收权还能保持多久?

项目官网iamhitl.com留了入口,但文档里没提下一步计划。5699次测试全部通过之后,第5700次测试该测什么——这个问题留给正在读的人。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
在过去的10年里,中国如何建立起庞大的天然气储备

在过去的10年里,中国如何建立起庞大的天然气储备

风向观察
2026-04-09 12:00:32
突然,跳水!刚刚,以色列宣布:已击毙

突然,跳水!刚刚,以色列宣布:已击毙

中国基金报
2026-04-09 16:25:48
iPhone Ultra 售价曝光,国行起售价 17,999 !

iPhone Ultra 售价曝光,国行起售价 17,999 !

XCiOS俱乐部
2026-04-09 13:52:43
又躺了!仅打4分钟退赛,32场啊,生涯新低,3年1亿要打水漂

又躺了!仅打4分钟退赛,32场啊,生涯新低,3年1亿要打水漂

球童无忌
2026-04-09 22:30:27
明星盛典上,矿泉水被胶水粘死,全场艺人拔到怀疑人生!

明星盛典上,矿泉水被胶水粘死,全场艺人拔到怀疑人生!

茶余饭好
2026-04-09 11:03:46
全球第一针逆龄针已注射人体,OSK重编程细胞返老还童!

全球第一针逆龄针已注射人体,OSK重编程细胞返老还童!

时光派长寿观察
2026-04-09 17:48:51
郑丽文抵达上海受高规格接待!蒋万安发声:反对统一,要对等尊严

郑丽文抵达上海受高规格接待!蒋万安发声:反对统一,要对等尊严

混沌录
2026-04-08 19:31:04
美媒爆料美国未就涉伊朗临时停火协议及时与以色列协商,内塔尼亚胡否认

美媒爆料美国未就涉伊朗临时停火协议及时与以色列协商,内塔尼亚胡否认

环球网资讯
2026-04-09 08:41:50
中方被踢出局?英巨头146亿库存拱手送印度:结果酿成悲剧了

中方被踢出局?英巨头146亿库存拱手送印度:结果酿成悲剧了

火星方阵
2026-04-09 17:04:45
中纪委:禁止机关事业单位在编职工去做这几种副业!

中纪委:禁止机关事业单位在编职工去做这几种副业!

细说职场
2026-04-09 15:34:47
伊朗副外长:伊朗代表团将前往伊斯兰堡参加谈判

伊朗副外长:伊朗代表团将前往伊斯兰堡参加谈判

财联社
2026-04-09 21:17:17
2026驾驶证全面调整!C1/C2车主必看:换证、年龄、扣分全变了

2026驾驶证全面调整!C1/C2车主必看:换证、年龄、扣分全变了

复转这些年
2026-04-09 11:26:53
哈梅内伊家族有多富?

哈梅内伊家族有多富?

律法刑道
2026-04-09 11:45:27
白宫打击伊朗决策内幕:拆解以方四步计划,CIA局长说“荒谬” 鲁比奥称“乱扯”

白宫打击伊朗决策内幕:拆解以方四步计划,CIA局长说“荒谬” 鲁比奥称“乱扯”

红星新闻
2026-04-09 18:24:30
14.2万富豪大迁徙:他们用脚投票,资本流向告诉你未来20年去哪

14.2万富豪大迁徙:他们用脚投票,资本流向告诉你未来20年去哪

苏格拉高
2026-04-08 07:40:00
美媒称特朗普要求内塔尼亚胡减少对黎巴嫩的打击

美媒称特朗普要求内塔尼亚胡减少对黎巴嫩的打击

新华社
2026-04-09 23:17:03
震惊!陈丽华葬礼现场,迟重瑞以“当家人”姿态,排在队伍第一位

震惊!陈丽华葬礼现场,迟重瑞以“当家人”姿态,排在队伍第一位

火山詩话
2026-04-09 15:51:43
不声不响从7元涨到210,因为业绩概念涨了30倍,今天又快速拉板!

不声不响从7元涨到210,因为业绩概念涨了30倍,今天又快速拉板!

丁丁鲤史纪
2026-04-09 14:47:04
穆罕默德·维沙身亡

穆罕默德·维沙身亡

南方都市报
2026-04-09 14:20:56
丰田社长警告484家供应商:中国电车面前,不改革就灭亡

丰田社长警告484家供应商:中国电车面前,不改革就灭亡

不掉线电波
2026-04-09 10:29:44
2026-04-10 03:24:49
薛定谔的BUG
薛定谔的BUG
有态度网友ytd
1048文章数 30关注度
往期回顾 全部

科技要闻

Meta凌晨首发闭源大模型 扎克伯格又行了?

头条要闻

以色列总理:同意与黎巴嫩直接谈判

头条要闻

以色列总理:同意与黎巴嫩直接谈判

体育要闻

8万人面前心脏骤停 现在他还站在球场上

娱乐要闻

金莎官宣结婚 与老公孙丞潇相差18岁

财经要闻

停火又悬了,最糟糕的情况要来了?

汽车要闻

文飞掌舵,给神行者带来了什么?

态度原创

教育
游戏
家居
亲子
数码

教育要闻

一年英硕是父母给你另一张地图的体验卡!

Xbox手柄重大失误!微软补偿方案出炉堪称豪华

家居要闻

清新自然 复古风尚

亲子要闻

五个月的宝宝必须学温伯格的宇宙学才不哭

数码要闻

华为多款新品在路上:Pura 90、阔折叠、AI眼镜、平板耳机全都有

无障碍浏览 进入关怀版