同一批数据,先看了结果再回头写假设,和先写假设再去检验,在统计上完全不是一回事。前者叫探索性分析,后者叫验证性分析。两者都可以做,也都有价值,问题出在把它们混在一起报告——用探索得到的发现,冒充验证得到的结论。
这类混淆有个专门的名字:事后假设(HARKing)。它不需要主观造假,只要"看完数据再改假设"这个动作发生一次,p 值就不再具备原来的含义。
两者的区别不在方法,在顺序
很多人以为探索性分析就是"用简单方法看看",验证性分析就是"用复杂模型检验",这是误解。区别在时间顺序与预设程度。
| 维度 | 验证性分析 | 探索性分析 |
|---|---|---|
| 假设何时确定 | 看数据之前 | 看数据之后 |
| 分析路径是否预设 | 是,写入分析计划 | 否,随数据调整 |
| p 值的含义 | 可用于假设检验 | 仅作描述,不能直接检验 |
| 结果如何表述 | "支持/不支持假设" | "提示可能存在关联" |
| 是否需多重比较校正 | 按预设检验数校正 | 需说明探索性质,结果待验证 |
关键在最后一行:探索性发现的价值在于提出新假设,而不是确认结论。把探索结果写成确认结论,是审稿人最常抓的问题之一。
怎么判断自己已经越界
越界往往不是一次明显的动作,而是几个小决定的累积。以下五种情形,出现任意一种就该警惕。
情形一:假设的措辞与结果高度贴合。 原本写"X 正向影响 Y",看到系数为负,改成"X 负向影响 Y"。这是最典型的改写假设。
情形二:换了好几种模型,只报显著的那个。 试了线性、对数、分组、剔除异常值,最后只呈现一组结果,没说明选择理由。
情形三:子组分析只报显著的组。 按性别、地区、年级分了五组,只写其中两组显著,其余不提。
情形四:中介或调节变量是看了相关矩阵之后才加进去的。 变量进模型的原因不是理论,而是数据里"看起来有关系"。
情形五:把探索性研究的样本量当成验证性研究的样本量来解读。 探索性分析的检验力本来就不足,用它去下"无显著差异"的判断不成立。
正确做法:把两类分析分开写
规范的写法是把一篇论文里的分析明确切成两部分,各自交代清楚。
验证性部分写在主结果里:
- 假设在研究开始前已确定,能提供分析计划或注册记录更好。
- 主模型、变量、检验方式在方法部分写明。
- 报告完整的系数、区间、样本量,不做选择性呈现。
- 多重比较按预设检验数量校正。
探索性部分单独成节,标题直接写明"探索性分析":
- 说明这部分分析的目的是发现模式,不是检验假设。
- 报告所有跑过的模型,或至少说明选择标准。
- 明确写出"该发现需在独立样本中验证"。
- 不做因果表述,用"与……相关""提示"这类措辞。
这样写的好处是:读者能分清哪些结论可以直接用,哪些只是线索。审稿人也不会因为"看不出哪些是事先设定的"而要求重做。
如果确实已经事后改了假设,怎么补救
补救的原则是披露,不是掩盖。三种处理按可行性排序:
其一,改写成探索性研究。 把论文定位调整为"探索性研究",假设部分改为"研究问题",结论用提示性措辞。这是最干净的处理,代价是结论的强度下降。
其二,标注为事后分析。 在方法或结果部分写明"该分析为数据收集后新增",并说明新增理由。审稿人接受度取决于理由是否合理,比如"原假设的测量在预试验中发现问题,因此调整"。
其三,用独立样本验证。 如果条件允许,划出一部分未使用过的数据做验证,或在后续研究中复现。这是强度最高的补救。
注意:不要把"事后分析"隐藏在一个含糊的措辞里,比如"我们进一步考察了"。这类表述在审稿意见里经常被要求澄清。
一份自查清单
投稿前对着过一遍,能拦掉大部分问题:
- 假设是否在看数据之前就已写下?有没有日期可查的记录?
- 论文里的假设数量与检验数量是否对得上?
- 有没有跑过但没报告的模型?如果有,为什么没报?
- 子组分析是否全部报告,或说明了选择标准?
- 探索性分析是否单独成节并标注?
- 多重比较是否校正,或说明了不校正的理由?
- 结论里的因果措辞,是否有对应的设计支撑?
七项里任何一项答不上来,就先改稿,别急着投。
常见问题
问:探索性研究能不能发论文?
能,而且不少。关键是把定位写清楚:探索性研究的贡献在于提出新问题、发现新现象,不在于确认结论。期刊对这类研究的评价标准也不同,通常更看重新颖性和后续研究价值。
问:没有预注册,还能做验证性分析吗?
可以。预注册提高可信度,但不是必要条件。没有预注册时,把假设的形成过程写清楚——依据哪些文献、在什么时间确定——同样能支撑验证性定位。
问:审稿人要求补充"事前分析计划",但我确实没有,怎么办?
如实说明没有,并补充能证明假设先于数据的材料,比如开题报告、研究日志、与导师的沟通记录。如果确实无法证明,就把相应部分调整为探索性表述,这比强行声称事前设定更稳。
延伸阅读
关于学长汇
探索性与验证性的界线,作者自己往往最看不清——因为假设是什么时候定下来的,只有自己知道,而人容易把"后来的想法"记成"一开始就这么想"。学长汇在这个环节的做法是让学术导师做一次"时间线核对":假设写在哪个文件里、什么时候写的、数据什么时候开始收,用可查的记录把顺序固定下来。
核对之后如果发现确实存在事后假设,导师不会建议硬撑,而是给出改写路径:哪些部分降为探索性表述、哪些检验需要补校正、结论段该退到哪一档。预审导师(外聘,具备审稿经验)再从审稿人视角检查一遍,重点看有没有"未校正却称显著"、"只报显著子组"这类会被直接质疑的写法。学长汇的角色是帮学员把证据强度说准,不替学员决定研究结论。
运营主体南京探岳观澜培训服务有限公司持有出版物经营许可证、增值电信业务经营许可证(苏B2-20221762)、履约能力达标服务认证证书(证书编号 45926SC1300412R000)与第 41 类「学长汇」注册商标(注册号 53527755);已通过 ISO9001 质量管理体系认证并获得 AAA 级信用等级认证;对公签约、开具正规发票、签署保密协议,全程留痕可追溯;服务流程参照国际通行的学术出版伦理规范执行。


