知识增量Knowledge Deltav0.1无限进步

稳健性检验

Robustness checks
学到 会用 就够:能亲手用起来
你可能会说

“我的主要结果换一种合理设定还成立吗,怎样检查才不是只挑好看的回归?”

稳健性检验检查结论对哪些合理选择或潜在问题敏感,例如换一种测量、样本规则或估计办法后,结果是否明显改变。

先知道回归分析
也叫稳健性检查、敏感性分析
2

使用 AI

科研里的例子

假设农业政策研究担心同期交通改善解释了结果,作者检查交通变化的时点和相关比较,而不只把回归重复十遍后数有几个星号。

先指出要检验的具体疑问,再选择能触及这个疑问的检查。担心某个地区主导结果,可以查看去掉该地区的影响;担心同期政策混在一起,则需要针对那个替代解释设计比较,而不是随意换一列控制变量。尽量在看结果前记录检查计划,保留不支持主结论的结果,并说明变化来自样本、测量还是方法。所谓稳健,不要求所有系数一模一样,而要关注大小、方向、区间和目标问题是否一致。许多相似模型共享同一个错误设计,反复得到同方向结果也不能弥补它。证伪或安慰剂检查同样需要清楚的理论依据。

+

在你的学科里,直接拿去用

把数据分析要求写成可复现说明
请先为这项分析形成可复现的任务说明,再建议代码。
问题:[填写]
数据字典及已有规则:[提供]
可用软件与现有代码:[提供]
明确一行数据代表什么、样本范围、连接键、单位、缺失码、变量构造、估计对象和输出。区分描述分析与因果分析;缺少识别依据时不要把回归系数直接称为因果影响。给出小样本核对、异常记录和可重跑顺序。保留原始数据,所有转换写到派生结果并留记录;不能为得到显著结果修改数据或筛选规则。
方括号里的内容换成你自己的。来自知识增量《科研中英表达与 Prompt 指南》PG08
3

判断

亲手检查一次

为每项检查写一句“它在排查什么问题”,没有对应疑问的检查先重新评估,并保留全部相关结果。

它做不到的

稳健性检查不能补造可信的因果比较,也不是通过规定数量的附表就算完成。改变研究对象后,结果不同也可能是在回答另一个问题。

Δ

增量,由你来写

读完这张,你的理解变了什么?

留言功能会在后面的版本开放。现在可以先在 X 上 @knowledgedelta 告诉我。

源

来源

卡片底稿由 AI 协助整理,经过核对;发现错误请告诉我。