![]()
一个数据平台,6个用户,6种完全不同的描述。这不是用户调研,这是罗生门现场。
产品经理最怕的不是差评,是用户根本不在同一个频道上聊天。你以为他们在讨论你的产品,实际上他们说的是6个平行宇宙里的6个东西。
调研开始:每个人都觉得自己在用"那个系统"
采访第一位工程师时,他花了20分钟讲自然语言查询功能。说这套系统让他"终于不用写SQL(结构化查询语言)就能拉数据",语气像是发现了新大陆。
第二位开口就是数据血缘追踪。她关心的是"这张报表的字段从哪来、经过谁的手",完全没提自然语言的事。问她知不知道有对话式查询,她愣了一下:"哦,那个啊,我们部门没开通权限。"
第三位更离谱。他描述了一套"AI(人工智能)自动修复数据异常"的工作流,还演示了怎么让系统自己发告警邮件。但产品经理听得头皮发麻——这个功能明明还在内测,他的版本号比官方发布早了三个月。
到这里已经不对劲了。同一套代码库,三个用户活出了三种人生。
第四个人是财务背景转的数据分析师。她眼里的系统是"Excel(电子表格软件)高级替代品",核心卖点是能直接导出带格式的透视表。AI?自然语言?"那些太花哨了,我们领导不让用,说黑箱操作审计过不了。"
第五位是架构师,开口就是治理层。数据质量评分、元数据管理、权限管控的细粒度设计——这些在其他人嘴里从没出现过。他甚至画了一张架构图,和产品经理手里的官方文档对比,相似度不到40%。
最后一位最坦诚:"我就用它来跑定时任务,每天凌晨三点自动刷新几张表。其他的?界面太复杂,我没点进去过。"
![]()
复盘:产品是怎么被"肢解"的
这不是用户理解能力的问题,是产品自己长成了六边形怪物。
自然语言查询、数据血缘、AI治理、报表导出、元数据管理、定时任务——六个模块,六个入口,六个完全独立的操作路径。用户A从门A进去,终其一生不知道门B到门F的存在。
产品经理的惯性思维是"功能齐全=产品完整"。但用户的认知带宽有限,他们只会记住自己每天点的那三个按钮,然后把整个系统命名为"那个能帮我做XX的工具"。
更隐蔽的伤害在于:每个用户都以为自己在用"完整版",实际上都在用残血版本。
财务分析师不知道自然语言查询,所以每次需求变更都要排IT的队,等两周。架构师不知道定时任务可以图形化配置,还在手写Cron表达式(定时任务语法),骂系统难用。自然语言查询的用户不知道数据血缘,问出来的数字不敢上报,怕背锅。
产品团队花了三年堆功能,结果每个用户只解锁了1/6的地图。这不是功能冗余,是功能隐形。
RAG(检索增强生成)的教训:真实数据会撕碎所有假设
作者还讲了一个更惨的故事。他给分析团队搭了一套RAG系统,内部测试时效果惊艳——问什么答什么,上下文理解精准,幻觉率(生成错误信息的概率)控制在5%以内。
上线第一周,崩溃。
![]()
真实数据比测试集脏十倍。字段命名不统一,同一张表在不同业务线有六个别名。元数据描述是三年前写的,责任人早离职了。用户提问的方式和预想完全不同,不说"查询Q3华东区销售额",说"老王那个表,就是上个月开会用的,能帮我看看数字对不对"。
RAG系统需要检索的不仅是数据,还有组织记忆。但组织记忆从来不在数据库里,在人的脑子里、在聊天记录里、在没人敢删的Excel备份里。
测试环境里的"干净数据"是一种幻觉。真实企业的数据生态,是十几年补丁摞补丁的遗产,是部门墙和信息孤岛的肉搏现场。RAG系统在这种环境里,就像一个训练有素的翻译官,被扔进了方言混杂的菜市场。
作者的原话很扎心:"它工作得很好,直到我们加入真实数据。"
治理的悖论:信任是功能,不是文档
六个用户对系统的描述差异,本质上是对"信任"的理解不同。
财务要的是可审计、可回溯,每一个数字都能讲清楚从哪来。架构师要的是可控、可预测,权限不能越界,变更不能失控。业务分析师要的是快、准、不用求人,至于数据怎么来的,"IT说没问题就行"。
产品文档里写了"可信AI""数据治理",但这两个字在不同人脑子里激活的是完全不同的神经回路。没有统一认知的功能,等于没有功能。
更麻烦的是,信任无法通过培训建立。你告诉用户"我们的AI有解释性",用户听到的可能是"解释就是掩饰"。信任只能通过一次又一次"这次没翻车"的经验积累,而积累的速度,永远追不上组织遗忘的速度。
那位用内测版"AI自动修复"的工程师,他的信任从哪来?可能是某次凌晨两点,系统真的帮他定位了一个异常。这种瞬间的救赎感,比任何产品说明书都管用。但这也意味着,他的"系统"和别人的"系统",从根上就是两个东西。
产品团队该做什么?把六个入口合成一个,还是干脆承认这就是六个产品?
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.