美国财政部和美联储的研究人员发布的一项研究发现,至少一半的经济学论文难以复现,这反映了学术界的“再现性危机”(reproducibility crisis)不只存在于实验室科学(lab sciences)中。
该研究试图重现13家著名期刊上所发表的67篇经济学论文的结果,但即便是在数据不机密、有正确的分析软件,并在必要时联系了作者的情况下,也只有49%的案例得以复现。
这一结果加深了人们对研究者数据的担忧——一些研究者所用的数据不够,并在研究中存在,以求得到有利于其研究发展的积极结果。
根据这项研究,无法复现研究结果的主要原因是不能找到得出原始结论的正确数据或计算机代码,或是代码缺失关键的功能,或是数据中缺乏某些变量。而且在9个案例中,尽管作者提供了正确的数据和代码,还是得到了不同的结果,或代码未能成功完全执行。
弗莱堡瓦尔特·欧肯研究所(Walter Eucken Institute in Freiburg)研究员莎拉·内克尔(Sarah Necker)对此表示,经济学与其他学科相比可能更易陷入数据。例如,经济学家能够通过观察数据发现经济增长的原因,并发现其与某一变量的联系,而如果控制的是另一个变量,则这种联系可能消失。由于是研究者自己决定要控制哪一变量,因此研究者有很大的空间来结果。2014年,内克尔对若干位经济学家的一项调查显示,有超过1/3的受访者承认会控制变量,直到得到自己想要的结果。
内克尔表示,在经济学研究中一些“花哨的数学方法”流行开来,这导致其研究结果更难复现。现在,有些期刊会要求作者提供数据,但经济学家提供数据的积极性还不高。内克尔还提到,提供数据以供监督是一件“耗时”的事,这也增大了发现更多研究错误的风险。
推荐：