北极星指标要量价值闭环
一、痛点定位:Agent 变成可有可无
你的判断(16:33):用户积累了大量笔记,说明他需要这个记录型产品,但没有对 Agent 养成使用习惯 —— 说明产品只解决了「知识」的问题,没有解决「AI」的问题,Agent 就变成了可有可无的功能。而且用户得到一份看起来合理的总结后没有下一步,漏斗末端没有分层,无法知道是哪一环导致他不再用。
二、价值激活时刻
你提出的定义(16:42):价值激活发生在用户对 Agent 产出感到满意、并把它保存进知识资产的那一刻;因此最该埋点的是「保存」这个动作,再用它结合活跃度分析采纳频率。
需要区分的是:工具被调用是 Agent 的行为,不是用户的采纳行为。模型可以调用写入工具,但用户拒绝提案或写入失败,此时记激活就是假阳性。
三、指标口径(你的方案)
北极星候选:所有用户每周的 Agent 平均活跃天数
分子 = 一周内每个用户的去重活跃天数之和
分母 = 该周 Agent 周活用户数
选择天数而非调用次数的理由(你的原话):
- 调用次数不公平:C 端用户习惯不同,某天深度学习会长时间使用,另一些天调用很少,次数无法公平反映价值
- 活跃天数更能反映使用的深度与时长
- 一周 7 天对 C 端产品是较平衡的观察窗:产品若无吸引力,用户会在几天内流失
四、未决问题
- 活跃天数只能说明「用户在多少个不同日期触发过 Agent」,不能同时证明留存、深度和时长;回答越差、用户反复纠正重试,活跃天数反而可能升高 —— 所以它更像健康指标而非价值指标。
- 保存率能衡量一种价值激活,但总结、讲解、检索类任务可能本就无需保存。
- 待回答:只允许取一个证据时,看什么能区分「满意地完成任务」与「觉得没用而流失」?
- 待回答:看到「保存过的用户留存是未保存用户两倍」,能否直接把提高保存率设为核心目标?
相关
- 数据指标的解读(口径先于数值,同属指标方法论)
- 用户可感知的价值与差异化表达(价值要被用户感知)
- 一次循环只做一个可体验的v1能力 —— 每轮的范围判定