我打赌钱 -

“我可以告诉你,”在科学中可能有一个有用的角色

个人预测可能不会告诉我们很多,但群体预测很有用。

去年,一群庞大的研究人员合作,试图复制一些结果非常着名的社会科学研究。他们确定只有62%的研究发现在重复时发现了类似的结果。但研究人员发现了其他有趣的东西:其他科学家们擅长猜测猜测哪些结果会复制。

这是否意味着我们只能向科学家们提出他们的丛生,研究是强大的?这比这更复杂,但预测可以在科学中发挥有用的作用,新的项目正在追赶以利用它们。

显而易见的是什么?

科学家预测的成功并不意味着每个个人科学家(或非科学家)可以依靠他们的直觉来猜测哪种科学的结果是真实的。我们有一个术语:“确认偏见”。但这并不意味着科学家无法了解有关一些研究的知情,成立的怀疑。P.从整组群中删除科学家们可以平均偏离偏差并突出知识的疑虑,因此是对科学研究的非常有用的贡献。

写作科学本周,经济学家Stefano Dellavigna,Devin Pope和Eva Vivalt指出了一些收集预测可能具有科学的好处。

现在,在进行学习之前,我们对人们对一个话题的看法很少感受到的感觉以及他们以后是否更新他们的信仰。每个人都容易受到后视偏见的影响,这意味着一个新的研究,即使是令人惊讶的,也可以很容易地诱导“Pfft,我已经知道的pfft”的反应。但这实际上是真的吗?

在结果众所周知之前,没有让人们的想法,难以确定研究的结果是否真的是预期的,或者人是否刚才努力与新数据相匹配。当然,相反可能是真的:人们可以挖掘他们的脚跟并拒绝改变他们的信仰。

每个人都是科学家 - 易于隐形偏见和确认偏见的鹅卵石。因此,具有关于预测和信仰更新如何实际工作的数据可能是真正有用的,可以帮助研究人员了解他们最需要说服的人,以说服类似的政策制定者和同胞 - 回答证据。在真正的大规模中,预测可以了解科学领域如何随着时间的推移转移他们的共识。

弄清楚哪些研究真的令人惊讶也有助于将科学结果放在他们的适当环境中。如果他们令人惊讶,也许他们需要更多的复制和理智检查。和寒冷的,令人感到奇怪的结果,结果可能有助于出版物偏见,建议Dellavigna,教皇和Vivalt。期刊经常拒绝发布似乎无聊的结果,而不是“令人惊讶的”足以让预测显示出令人惊讶的结果是如何帮助研究人员跳过这个箍。(作者不要质疑首先拥有那箍的智慧。)

是什么让预测勾选

由于一系列不同的预测项目弹出,不同的预测项目是弄清楚的是让人们提供的鲜明方法以及如何利用预测。一些项目使用投注市场,其中人们可以看到其他参与者的猜测并相应地更新自己。Dellavigna和Vivalt的预测平台让人们的反应私下来避免他们被其他人的意见偏见。

关于研究的预测可能看起来与下一个项目非常不同。目标受众可能有所不同(科学家,政策制定者,公众)。研究人员可能想向人们提出更一般的预测,比如“你认为这项研究会有重要结果吗?” - 或者对于非常具体的预测,比如“你认为平均结果是什么?”

随着更多项目开始使用预测,应该了解如何使科学研究预测更准确。这可以帮助科学家在他们弄清楚哪个研究大道可能是最有前途的时候。

它还可以帮助研究人员弄清楚为什么投注市场擅长预测哪种工作将是强大的。墨尔本大学的巨大预测项目,复制品,正在这样做:弄清楚如何利用科学家的本能对他们的同行的工作,建立让科学家相互信任的研究,以及大型科学家的良好预测可以准确估计哪些研究很可能复制。

在其初期的中,使用预测的使用非常重要,但随着它的增长,它的数据可能会变得越来越有用 - 在实际研究本身之上。

科学,2018. DOI:10.1126 / science.aaz1704关于Dois.)。

清单图像by.Flickr用户:anlopelope

你必须评论。

渠道ARS Technica