测试电子通讯主题，别把小差异当成大成果

主题测试比较的是介绍同一期电子通讯的两种清楚写法。保持正文一致，将可比收件人分到两个版本，并提前确定观察重点。之后出现的小差异，应视为需要解释的线索，而非立即认定胜出者。

这种诱惑很常见：两位同事各选一句喜欢的主题，发送平台显示一个比例较高，于是以后所有主题都加问号。但两组可能很小，内容可能不同，记录到打开也不一定代表人真正阅读。只有明确测试回答什么问题，它才有帮助。

先看承诺，再看百分比

先写下电子通讯实际提供什么：检查清单、某项变化的解释，还是邀请？主题应让人认出内容。误导性承诺带来的更高回应，不是改进。

再比较两个都正确的表述。例如，研究读者问题是否比描述性标题更清楚：“花园咨询前该准备什么？”与“花园咨询前的三项准备”，以不同方式介绍同一主题。

“您的预约已确认”则会制造另一种错误预期。没有预约时，它不是可接受的测试版本。伪装成私人回复，或仅为制造紧张感而加上的截止时间，同样不合适。

先用有价值的电子通讯指南确定内容。主题无法让本来含糊的一期突然变得相关。

提出一个测试能够回答的问题

有用的假设会把具体变化与理由连起来。例如：“相比一般公告，准备问题能更清楚地展示对读者的用途。”这样研究的是措辞，而不是同时比较两个主题的吸引力。

写清保持不变的因素：发件人名称、内容、目的页面、发送时间和受众标准。只改变与假设有关的部分。若也有意更换预览文字，应把测试称为两种组合的比较，不能事后只把差别归给主题。

同时确定何时查看结果。预先选择观察窗口，可避免喜欢的版本暂时领先就停止。合适时长取决于目标、阅读习惯与内容，并不存在适用于所有名单、都能得到可靠结论的统一小时数。

同时写好预览文字

预览文字又称 preheader，用来补充主题。不要自动重复同一措辞，应用这段空间提供有助于判断相关性的背景。不同邮件程序展示长度不同，所以意思要靠前，并在窄屏查看真实呈现。

比较主题时，预览文字可以保持一致。例如：“不必已经有设计方案，这些问题能为咨询提供方向。”两个主题都应能自然接上这句说明。

留意邮件是否误把技术页脚或图片描述的第一行当成预览文字。发送服务的预览有帮助，但也要向自己的测试地址试发检查。一种邮件程序显示整齐，并不能证明所有收件人看到相同截断。

尽量让两组可比

面向已确认订阅者的测试，应从有资格接收本次邮件的联系人开始。明确同意的订阅指南解释基础流程。测试不是从其他文件额外添加地址的理由。

尽量在同一合适受众中随机分组，并确认发送服务如何定义随机。如果旧联系人总收 A、新联系人总收 B，比较的也包括两种不同订阅关系。

不要把向同一个人重复发送，当成独立的新机会。第一封可能影响第二封。考虑地址失效、退订或暂时无法接收的情况，记录各组真实人数，而非只抄仪表盘上的两个大百分比。

选择符合内容目标的指标

打开记录说明邮件加载过程中有技术活动被观测到，并不证明多少人有意识地阅读。隐私功能可能在后台加载内容，或隐藏收件人信息。

点击目标深入链接，可能更接近内容目标，但点击记录也可能包含自动检查。确认服务的指标定义是否考虑这些情况。如果与邮件内容自然相关，且被妥善记录，完成报名或内容回复也可以有意义。

把不希望出现的后果与目标迹象一起看。流量增加，同时投诉或退订增加，就需要研究。不要让一个数字概括全部读者体验。避免虚假确定性的营销成效衡量提供更广的做法。

虚构结果与适度结论

以下计算完全虚构。没有发送活动，也没有测量真实收件人。一家虚构花园咨询工作室，想在主动订阅准备建议的人中比较两个主题。

两组收到相同的首次花园咨询邮件。发件人、预览文字、正文和发送时间不变。工作室提前选定观察窗口内，通往准备指南的去重记录点击数为主要迹象。

版本 A

• 主题：“花园咨询前该准备什么？”
• 本虚构示例送达邮件：120 封。
• 指南的去重记录点击：8 次。
• 点击数除以送达数：约 6.7%。

版本 B

• 主题：“花园咨询前的三项准备”。
• 本虚构示例送达邮件：120 封。
• 指南的去重记录点击：10 次。
• 点击数除以送达数：约 8.3%。

示例中 B 多两次记录点击。按四舍五入后的比例计算，相差约 1.6 个百分点。这不能证明 B 长期更有效。人数这么少时，一两个不同读者、处理差异或随机分组，都可能有很大影响。

合理记录可以是：“在这次小规模比较中，B 的记录点击迹象较高。我们保留结果，在未来合适一期再次研究问句形式。”宣称“这种写法能让点击增加四分之一”，则把结果过度推广到了新情境。

小名单也可以带来学习

收件人很少时，先从定性角度检查清楚程度，可能更有价值。请几位合适的试读者描述，看到主题后期待什么，而不只是问最喜欢哪句话。再把预期与实际内容比较。

这样的对话带来解释和潜在问题，不代表测得整个名单的效果。结合多期观察使用。若主题、季节或受众变化，就不要假装不同期之间只差主题。

保存简单日志：日期、假设、版本、分组、指标定义、结果和决定。证据不足以支持改变时，也写下来。这能避免每期都重新由声音最大的同事凭喜好决定。

开始比较前检查

• 两个主题是否都诚实描述同一内容？
• 哪项改变、哪些不变，是否明确？
• 组别是否合适，并尽量可比？
• 是否约定指标、观察窗口和解释方式？
• 是否理解自动处理可能怎样影响记录？
• 是否能用绝对数量解释结果？

用结果支持下一次编辑选择。订阅后的首封内容邮件，可继续参考实用欢迎邮件写作。更多说明见电子邮件营销。

来源与延伸阅读

• Apple：邮件隐私保护，解释 Mail Privacy Protection 的运作，以及对内容加载的影响。
• Google：电子邮件发件人指南，介绍技术要求与发送做法。

虚构数字用于说明如何阅读小规模比较，不是点击率标准，也不是效应大小的证据。