审查论文统计


43

对于我们中的某些人来说,裁判论文是工作的一部分。当裁判统计方法论论文时,我认为来自其他学科领域的建议相当有用,例如计算机科学数学

这个问题涉及审查更多实用的统计论文。我的意思是,论文被提交给非统计/数学期刊,而统计仅在“方法”部分中提到。

一些特殊的问题:

  1. 我们应该花多少精力来了解应用领域?
  2. 我应该在报告上花费多少时间?
  3. 您看数字/表格时有多挑剔。
  4. 您如何应对无法获得的数据。
  5. 您是否尝试重新运行所使用的分析?
  6. 您一年最多可以审阅多少篇论文?

有任何疑问吗?随时编辑或添加评论。

编辑

我是作为统计学家来审查生物学论文的这个问题的,但是我对任何非数学学科的统计学评论都感兴趣。


我不确定这是否应该是CW。一方面,它有点开放,但另一方面,我可以看到自己接受了答案。另外,答案可能会很长。

Answers:


21

我不确定您指的是哪个科学领域(例如,如果要处理生物学与物理学,我肯定答案会是真的不同...)

无论如何,作为生物学家,我将从“生物学”的角度回答:

我们应该花多少精力来了解应用领域?

如果我不太熟悉,我倾向于至少阅读同一作者的先前论文,并寻求对该主题的一些评论。在处理我不知道的新技术时尤其如此,因为我需要了解它们是否进行了所有适当的控制等。

我应该在报告上花费多少时间?

尽可能多的需要(好,答案很愚蠢,我知道!:P)通常,我不希望有人因为我/她还有其他事情要做而评论我的论文来做一个近似的工作,所以我尽量不要自己做。

您看数字/表格时有多挑剔。

很挑剔。数字是浏览纸张时首先要看的东西。它们需要保持一致(例如,轴上的正确标题,正确的图例等)。有时我建议使用另一种图来显示数据,因为我认为使用的图不是最好的图。这在生物学中经常发生,该领域以“ barplot +/- SEM”类型的图形为主。我对“材料和方法”部分也很挑剔:对固有错误的生物学模型进行完美的统计分析是完全没有用的。

您如何应对无法获得的数据。

我猜你只是相信作者。在生物学的许多情况下,您无能为力,尤其是在处理成像或动物行为之类的事物时。除非您希望人们发布大量的图像,视频等(您极有可能不会浏览),但这可能非常不切实际。如果您认为数据确实必要,请要求作者提供它们作为补充数据/图。

您是否尝试重新运行所使用的分析?

仅当我对作者得出的结论有严重怀疑时。在生物学中,什么是(或没有)“统计上有意义的”和什么是“生物学上重要的”之间通常存在区别。我更喜欢具有良好生物学推理的更薄的统计分析,而不是其他方式。但是同样,在极不可能的情况下,我要审查一份生物统计论文(啊,那会很有趣!!)我可能会更加关注统计数据,而不是那里的生物学。


6
我本来会给出几乎相同的答案,但这里也很明确。让我根据经验添加两件事。首先,我发现几乎总是值得重新运行任何可能的分析:它可以检查我的理解,并且比人们期望的更多,它可以揭示论文本身的错误。其次,至关重要的是找到关键的参考文献,并通过在网上搜索论文中的短语来找到自己的参考文献。最近,大量的贡献是(自动)抄袭或秃头的尝试,希望从旧工作中获得另一篇论文。

我添加了另一个问题。如果不是很麻烦,您会更新答案吗?
csgillespie 2010年

1
@csgillespie:我想我回答这个问题还为时过早,因为我可能没有被要求像我这样拥有更多经验的人来评论那么多论文。我认为@whuber的答案很有意义。
nico 2010年

16

这解决了新的问题6:“一年内您最多可以审阅多少篇论文?” 我作为几个编辑委员会的成员回应。长期存在的问题是找到足够的审稿人。根据期刊的不同,每篇提交的论文都需要一到三名同行评审,通常是三名。如果该期刊的接受率为%,则每篇被接受论文的平均评论显然约为。 例如,如果接受率为33%,则编辑需要为每篇发表的论文获得9条评论。如果您作为作者认真对待这一点,那么您应该尝试为您发表的每篇论文提供九篇评论(或数量多少适合您的目标期刊)!3 /x / 100 x3/(x/100)

由于在此站点上进行投票非常有帮助,所以我写这篇文章很感动:为了使您获得的声誉,其他人必须赞成您答案的和问题的的某种组合。因此,如果您在增加体重,检查个人资料应至少显示票。对于本网站上许多(但不是全部)最活跃的成员来说就是这种情况。需要考虑的事情...记住要投票!r / 10 r / 5 r / 10rr/10r/5 r/10


1
在这里所有人中的@chl您应该最不用担心投票了!
ub

1
@chl:您在各个方面都设置了较高的标准!:)也许我们的第一个polystats项目应该是建立一些脚本来维护和更新如下图表:meta.stats.stackexchange.com/questions/314/…–
ars

11

我的POV将审阅心理学论文或对其统计优点进行预测。我主要会赞同Nico的很好的话。

我们应该花多少精力来了解应用领域?

实际上,很多。如果我不了解这一领域,就不会对最基本的统计问题发表评论。幸运的是,这在心理学的许多分支中通常并不难。

我应该在报告上花费多少时间?

我会费力地陈述一个特定的时间:我会花2到8个小时之间的任何时间进行审查,有时甚至更多。如果我发现自己在纸上花费了超过一天的时间,则可能意味着我真的没有资格理解它,因此,我建议该期刊找其他人(并建议一些人)。

您看数字/表格时有多挑剔。

确实非常挑剔。这些数字将成为人们记忆中的论文,并且最终在没有太多上下文的情况下进行演讲,因此确实需要做得很好。

您如何应对无法获得的数据。

在心理学上,通常不共享数据-通过MRI测量50人非常昂贵,作者将希望将这些数据用于以后的论文,因此我理解他们不愿意仅仅给出数据。因此,任何共享数据的人都会在我的书中获得很多好处,但是共享是可以理解的。

在预测中,许多数据集都是公开可用的。在这种情况下,我通常建议作者共享他们的代码(并自己共享)。

您是否尝试重新运行所使用的分析?

没有数据,只能从中学到很多。如果论文的结果令人惊讶,我将处理模拟数据。否则,人们通常可以在没有数据的情况下通过不适当的方法分辨出适当的信息(一旦了解了该区域,请参见上文)。

您一年最多可以审阅多少篇论文?

上面的要点实际上没有什么要补充的-假设每篇论文的平均作者(我)(共同)提交的n个论文均获得3篇评论,那么每篇论文的发表应真正针对至少3 /(n + 1)篇论文(计算提交的内容,而不是自己的论文,这些论文可能会被拒绝并重新提交)。当然,提交的数量和合著者的数量会因学科而异。


我添加了另一个问题。如果不是很麻烦,您会更新答案吗?
csgillespie 2010年

1
有趣的是,大多数遗传学研究人员都受到鼓励或高兴(取决于评价)来提供数据。我还想起@csgillepsie关于可重复研究的好答案,stats.stackexchange.com / questions / 1980 /…
chl

@chl:是的,数据的可用性在很大程度上取决于学科,我很乐意在“主流”心理学中看到更多的信息-我只是不记得看到过一份心理学论文确实确实给出了数据。
S. Kolassa-恢复莫妮卡
By using our site, you acknowledge that you have read and understand our Cookie Policy and Privacy Policy.
Licensed under cc by-sa 3.0 with attribution required.