衡量成功
内容记分卡帮助你判断一则玩家教育内容是可以发布,还是需要修订。本模块讲解NPS问题、五个语义词对和三调查决策树。你将学会解读结果,并找出需要改进的地方。
Operator note: 请将全文中的
{{PROGRAM_NAME}}替换为贵方的项目名称。NPS问题的措辞、五个语义词对、评分阈值,以及「发布或修订」决策树,都属于品牌衡量系统的一部分,不应改动——正是它们让记分卡在不同运营方之间保持可比。你真正要定制的,是如何部署这份调查(嵌入小组件、Google Forms、Typeform),以契合你的技术栈。旁白脚本应以Playbook的Tier 1（第一层级）语调录制。
项目: 品牌基础 | 时长: 约20分钟 | 前置条件: 客户旅程
快速浏览目录
| 章节 | 内容 | 时间 |
|---|---|---|
| 学习目标 | 完成本模块后你将掌握什么 | — |
| 第1节:内容记分卡 | NPS锚定指标和五个语义词对 | 约10分钟 |
| 第2节:运行一份记分卡 | 三种调查工具和决策树 | 约7分钟 |
| 模块测验 | 5道评分题,合格线80% | 约3分钟 |
| 要点总结 | 小结 | — |
学习目标
完成本模块后,你将能够:
- 搭建内容记分卡,并区分读者反馈与行为改变的证据
- 为你正在测试的阶段挑选正确的调查工具——Pulse、Full还是Recall
- 针对一份真实的记分卡运行「发布或修订」决策树,包括边缘情形
第1节:内容记分卡
阅读
内容记分卡收集读者对一则作品的看法。用它来决定该调查或修订什么。它不能证明这则作品改变了行为或减少了伤害。
NPS问题是:「你有多大可能把这则素材推荐给一位会博彩的朋友?」回答范围为0到10。先算出回答9–10的百分比(推荐者),再减去回答0–6的百分比(贬损者)。回答7–8的是被动者,他们仍计入分母。
例如,在100份完整回应中,55位推荐者、25位被动者和20位贬损者,得出NPS +35。这个结果衡量的是自述的推荐意愿,而不是实际分享。
本课程使用以下内部规划区间:
| NPS | 课程中的解读 |
|---|---|
| 50及以上 | 在本规划框架内属于卓越 |
| 30–49 | 强 |
| 0–29 | 低于发布目标;需要调查 |
| 低于0 | 贬损者多于推荐者;修订并重测 |
这些区间并非经过核实的行业基准,也不能证明成效。比较结果之前,请记录回应者是谁、样本量、招募方式,以及他们接触这则作品的情况。
五个语义词对描述的是读者感知到的特质。回应者使用1–7分的量尺,较正面的一端为7分。
| 词对 | 回答描述的是什么 |
|---|---|
| 易忘–难忘 | 此刻感觉这则作品有多难忘;之后能否记住,要另行测试 |
| 无聊–引人入胜 | 感知到的趣味性 |
| 说教–尊重 | 感知到的尊重程度和语气 |
| 令人困惑–清晰 | 感知到的清晰度;实际是否理解,要另行测试 |
| 通用–为我而作 | 感知到的相关性 |
在本框架中,词对平均分5.5及以上为强;4.0–5.4达到工作阈值。低于4.0需要调查;低于3.0是严重问题。除了平均分,也要阅读评论,并查看回答的分布。
品牌DNA警报优先于其他分数。 如果说教–尊重低于4.0,请暂停发布,查看评论,并修改语气和表达。NPS再高,也抵消不了这一问题。这是Playbook的审核规则,不是经过验证的诊断阈值。
旁白脚本
Narrator: [transition slide] 你会A/B测试邮件主题行。你会衡量活动的净推荐值。你的{{PROGRAM_NAME}}素材应当受到同等对待。因为Tier 1素材是一件产品,而非一张传单。
[pause 3s] {{PROGRAM_NAME}}素材与你的体育博彩促销、赌场忠诚度邮件和品牌活动争夺同样的玩家注意力。如果你会用净推荐值衡量那些,就用净推荐值衡量这个。质量标准是商业级的,而非对合规来说够用。
[show nps benchmark scale] 锚定指标是一个问题。你有多大可能把这则素材推荐给一位会博彩的朋友。按零到十打分,计算为推荐者百分比、也就是九和十,减去贬损者百分比、也就是零到六。基准在这里。五十或以上是卓越。玩家在自发分享素材。三十到四十九是强,与博彩和体育博彩应用同档。零到二十九是正面但低于目标。跑诊断。低于零意味着贬损者多于推荐者。出货前修订。
作为参照,像Netflix和Spotify这样的流媒体应用得分五十到七十。博彩和体育博彩应用得分三十到五十。传统的合规素材不被衡量。没人甚至会问玩家怎么想。{{PROGRAM_NAME}}瞄准与它并列的那些产品同样的区间。
[show five-pairs grid] 净推荐值告诉你一则素材是否奏效。语义词对告诉你为何,或为何不。有五对,每对按一到七打分。难忘对令人难忘衡量黏性。无聊对引人入胜衡量娱乐价值。说教对尊重衡量声音语域,这是关键的一对。令人困惑对清晰衡量理解度。通用对为我而作衡量文化共鸣。
[pause 5s] 如果说教对尊重低于四点零,停下。你的素材可能在向玩家说教。这就是品牌DNA警报。它会推翻一份在其他方面很强的记分卡。出货前,对照《声音与语气》的声音原则进行修订。
[pause 3s] 把这两块记牢——净推荐值的区间,和五个词对的阈值。在下一节里,它们会拼合成同一棵决策树,而你将亲手在六份真实的记分卡上运行这棵树。
第2节:运行一份记分卡
阅读
根据你需要回答的问题选择调查工具。
| 工具 | 调查内容 | 何时使用 |
|---|---|---|
| Pulse | NPS、易忘–难忘,以及一道关于改进的开放式问题 | 上线或有限试点后的初步反馈 |
| Full | NPS、全部五个语义词对及开放式反馈 | 诊断某个问题,或更深入地审视一则重要作品 |
| Recall | 自由回忆、知识题和自述的后续行动 | 接触内容7–14天后跟进 |
工作目标回应数为:Pulse或Full各30份,探索性A/B测试每个版本30份,Recall 25份。这些是规划目标,不是样本量计算,也不保证可靠性。招募方式、缺失回应、差异以及决策的重要性,都会影响你能得出什么推论。自述的后续行动不能证明是素材导致了行为改变。
把决策规则用于你实际收集到的测量结果:
- 修订并重测:NPS低于0时。测得的说教–尊重低于4.0时,也要暂停并修改语气;低于3.0表示问题尤其严重。
- 诊断:NPS为0–29,或另有某个测过的词对低于4.0时。用Full调查和评论来决定改什么。
- 发布或继续测试过的用途:NPS至少为30、每个测过的词对都至少为4.0,并且没有其他未解决的内容、无障碍或安全问题时。重要素材要安排Recall调查。
Pulse只测量易忘–难忘这一对,无法证明其他四对达标。如果你已经有不理想的Full结果,之后的NPS即使更高,也抹不掉这些结果。
两个实例: 一份虚构的Pulse调查有100份回应,NPS为+38,易忘–难忘为5.8。它达到了本课程的初始阈值,所以继续测试过的用途,并安排跟进调查。如果另一份Pulse的结果是NPS +14、易忘–难忘4.2,就做Full诊断。随后说教–尊重得分3.6,会触发暂停和语气修改;通用–为我而作得分3.4,也说明需要更仔细地审视相关性。分数提示你该看哪里;具体要改什么,靠评论和对作品的检查来确定。
每个结果都要对应一个可识别的作品版本。记录调查工具、接触日期、回应数量、招募方式以及任何缺失值。当受众、产品或措辞发生变化时,重新检查高流量素材;每季度复查一次,是有用的规划节奏。
作为团队的初步估算,预留两周内约3–4小时,之后再根据你们自己的经验来规划。调查设置、招募和分析可能需要更长时间。请使用调查小组件或经批准的调查平台,并按照你们的隐私与数据保留政策,把可比的结果存放在同一处。
旁白脚本
Narrator: [transition slide] 三份调查。一棵决策树。整个流程在两周内耗时三到四小时。
[show three-instruments card] Pulse是你的默认。三项,不到一分钟,瞄准三十份回应。它给你净推荐值、难忘对令人难忘那一对,以及一个开放式问题。每次发布后都发。
Full是你的诊断。七项,约两分钟,瞄准三十份回应,如果你在A/B测试两个版本则需六十。它加上全部五个语义词对,这样你能精确定位哪个维度需要打磨。在Pulse标记出问题时跑它。
Recall在玩家看到素材后七到十四天发出。它测三件其他调查测不了的事。自由回忆,也就是单纯问你记得什么。是非知识核查。还有行为跟进,也就是问你是否真的做了任何不一样的事。在Pulse上得分好却在Recall上失败的素材,是引人入胜却不令人难忘的。
[show decision tree] 决策树很直白。第一步,发Pulse。第二步A,如果净推荐值三十或以上且所有词对四点零或以上,出货。在七到十四天后安排Recall调查。第二步B,如果净推荐值零到二十九或任何词对低于四,跑Full来诊断。第二步C,如果净推荐值低于零或说教对尊重低于三点零,停止出货并修订。
[pause 3s] 样本量很重要。为可靠结果瞄准三十份回应。如果你在比较同一素材的两个版本,你需要六十,也就是每个变体三十。
[show deploy-options card] {{PROGRAM_NAME}}附带一个即用的调查小组件,自动计算分数并给出彩色编码的结果。你可以在约五分钟内把它作为iframe嵌入。或在约十分钟内用Google Forms配手动评分。或在约十五分钟内用Typeform或SurveyMonkey获得精致体验。无论你选哪一种,都把它定为团队默认,好让每一份记分卡都保持可比。
[transition to exercise] 现在把这棵树用起来。下面有六份真实的记分卡等着你——对每一份,做出判断:出货、诊断,还是修订。你刚学到的阈值决定其中每一个判断,不许凭感觉。逐一做完,然后继续。
Exercise: 发布、诊断还是修订?
Type: scenario
Instructions: 发布、诊断还是修订?对每张虚构记分卡套用本课程的内部阈值。没问到的词对视为未知。得分描述的是这批样本,不代表行为改变。
| 项目 | 正确分类 | 反馈(正确) | 反馈(错误) |
|---|---|---|---|
| Pulse结果(100份虚构回应):NPS +35,易忘–难忘 5.7。下一步是什么? | 发布 | NPS +35和易忘–难忘5.7都达到了初始阈值。继续测试过的用途,保留其他发布检查,并安排Recall调查。 | NPS +35超过30,易忘–难忘5.7(唯一问到的词对)超过4.0,所以判断是发布。 |
| Pulse结果(100份虚构回应):NPS +21,易忘–难忘 4.6。下一步是什么? | 诊断 | NPS +21低于30的目标。先做Full调查、查看评论,再决定修订什么。 | NPS为正,还达不到本课程的目标。0–29区间需要用Full调查来诊断。 |
| Pulse结果(100份虚构回应):NPS −8,易忘–难忘 5.1。下一步是什么? | 修订 | NPS −8低于0:贬损者多于推荐者。修订并重测;评论和检查会告诉你要改什么。 | 在这个框架里,负的NPS会触发修订。易忘–难忘5.1推翻不了它。 |
| Full结果(100份虚构回应):NPS +44,易忘–难忘 5.6,说教–尊重 2.8。下一步是什么? | 修订 | 尽管NPS为+44,说教–尊重2.8仍低于4.0这一暂停并修订的阈值。查看评论,修改语气。 | 说教–尊重2.8低于4.0,所以暂停并修订;NPS +44推翻不了它。要改什么,看评论,而不是看平均分。 |
| Pulse结果(100份虚构回应):NPS +33,易忘–难忘 3.8。下一步是什么? | 诊断 | 尽管NPS +33超过了30,易忘–难忘3.8仍低于4.0。做Full调查。易忘–难忘是感知得分,不是延迟回忆测试。 | 发布既要NPS达到30,也要每个测过的词对达到4.0。易忘–难忘3.8需要诊断。 |
| Pulse结果(100份虚构回应):NPS +52,易忘–难忘 6.1。下一步是什么? | 发布 | NPS +52和易忘–难忘6.1都达到了初始阈值。NPS记录的是推荐意愿,不是实际分享。安排后续调查。 | NPS +52超过30,易忘–难忘6.1(唯一问到的词对)超过4.0,所以判断是发布。 |
模块测验
Narrator: [transition slide] 该检验你学到了什么了。五道关于记分卡框架的题——净推荐值的区间、五个语义词对、三种工具,以及决策树。你需要80%才能将本模块标记为完成。慢慢来。如果第一次没通过,复习材料后重新参加测验。
Question 1
Assesses: 学习目标1
Stem: 内容记分卡里的NPS问题问玩家什么?
| 选项 | 内容 |
|---|---|
| A | 「你觉得这则素材有用吗?」 |
| B | 「你有多大可能把这则素材推荐给一位会博彩的朋友?」 |
| C | 「你会再读一遍这则素材吗?」 |
| D | 「你对我们的负责任博彩计划有多满意?」 |
Correct: B
Explanation: NPS是一道推荐问题,和商业产品用的是同一指标。Tier 1素材也是一件产品。
Source: Research Methodology
Question 2
Assesses: 学习目标3
Stem: 在每个测过的词对也都达到阈值、且没有其他未解决问题的前提下,本课程把多少NPS作为初始发布决定的阈值?
| 选项 | 内容 |
|---|---|
| A | 10 |
| B | 20 |
| C | 30 |
| D | 50 |
Correct: C
Explanation: NPS 30是本课程的初始发布目标,也是其「强」区间的起点。这些是内部规划规则,不是经核实的行业基准。
Source: Research Methodology
Question 3
Assesses: 学习目标1
Stem: 当哪个语义词对得分低于4.0时会触发「品牌DNA警报」?
| 选项 | 内容 |
|---|---|
| A | 易忘 — 难忘 |
| B | 无聊 — 引人入胜 |
| C | 说教 — 尊重 |
| D | 通用 — 为我而作 |
Correct: C
Explanation: 在这个框架下,说教–尊重低于4.0会触发暂停和语气修改。要改什么,看评论和措辞,而不是看平均分。
Source: Brand Personality
Question 4
Assesses: 学习目标3
Stem: 这份Pulse记分卡(100份虚构回应:NPS +22,易忘–难忘 5.2)的下一步是什么?
| 选项 | 内容 |
|---|---|
| A | 发布——22是一个正面的NPS |
| B | 跑Full调查来诊断哪些维度需要打磨 |
| C | 发Recall调查来核查留存 |
| D | 立即修订素材——这是一个不及格的分数 |
Correct: B
Explanation: NPS +22低于本课程+30的阈值,但不是负值:跑Full调查。得分告诉你该看哪里,而不是什么导致了这些回应。
Source: Research Methodology
Question 5
Assesses: 学习目标2
Stem: Recall调查测了什么Pulse和Full调查测不了的东西?
| 选项 | 内容 |
|---|---|
| A | 玩家是否在当下享受了这则素材 |
| B | 哪些语义词对得分最低 |
| C | 7-14天后的延迟回忆、知识和自述的后续行动 |
| D | 有多少玩家完成了调查 |
Correct: C
Explanation: Pulse和Full记录的是当下反应;只有Recall会在之后检查记忆和知识。自述的后续行动并不能证明是素材促成的。
Source: Research Methodology
要点总结
- 记分卡衡量的是读者对内容自述的反应。它不能证明知识、行为或伤害发生了变化。
- NPS的计算方法是推荐者百分比减去贬损者百分比,被动者仍计入分母。
- 五个语义词对告诉你该从哪里调查。决定改什么之前,先读评论,并检查素材本身。
- 测得的说教–尊重低于4.0时,无论NPS多少,都须暂停并修订。
- 用Pulse获取初步反馈,用Full做更细致的诊断,用Recall做之后的检查。Pulse无法证明它没有测量的词对达标。
- 本课程的内部阈值要与其他发布检查一起使用:NPS 30+且测过的词对均达4.0+,支持初始发布决定;NPS 0–29或另有词对偏低,需要诊断;NPS为负或说教–尊重低于4.0,须修订。
- 根据你要做的决定来规划招募和分析。固定的回应数量不能保证结果可靠或具有代表性。
资料依据
你不必阅读这些,但它们是与记分卡相关的已发表研究——以备利益相关方问起。
- Osgood, C.E., Suci, G.J., & Tannenbaum, P.H. (1957). The Measurement of Meaning. University of Illinois Press. 收录原因: 最初的语义差异方法论——使用两极的1–7词对(说教–尊重、无聊–引人入胜等)来衡量某一刺激被感知到的质量的学术基础。
- Reichheld, F.F. (2003). The one number you need to grow. Harvard Business Review, 81(12), 46-54. 收录原因: 奠基性的NPS论文——记分卡直接借用的方法论与「推荐给朋友」的问题措辞。
- Dillard, J.P., Shen, L., & Vail, R.G. (2007). Does perceived message effectiveness cause persuasion or vice versa? 17 consistent answers. Human Communication Research, 33(4), 467-488. 收录原因: 关于感知信息有效性与说服之间关系的研究。它并不验证这五个自定义词对,也不能证明这份记分卡能预测博彩行为或伤害结果。
参考资料
| 资源 | 用途 |
|---|---|
| Research Methodology | 完整的NPS与语义词对方法论、调查模板 |
| Brand Personality | 说教–尊重得分不达标时,用于修改的语气原则 |
| Survey Widget | 带自动评分的可嵌入记分卡调查 |