经济学

经济学研究,依识别策略评估

经济学判断力如何在工作论文系列之外得以体现,以及创始群体将据以评判的标准。以下内容均为有意公开的草稿。

哪些内容可作为经济学研究能力的证明

经济学以公开工作论文运作的历史比大多数社会科学都更悠久——NBER 与 SSRN 在期刊发表前数年便已流通研究结果——因此评估者可以直接阅读一篇论文的识别策略与稳健性检验,无需等待审稿人的裁定来替代自己的判断。

在学术界之外,同样的能力支撑着政策智库、中央银行以及科技公司内部经济团队的工作:支撑定价决策的因果推断工作、回测结果被如实报告的预测模型、明确陈述反事实的内部备忘录,用以估算某项干预的效应。这类工作即便细节保密,其方法却是公开的,因而可被评估。

从简历中最难看出的,是一项识别策略是否真正排除了它所声称排除的替代解释。这种判断力——工具变量的相关性、平行趋势假设、断点回归的有效性——正是结构化阅读所能揭示、而引用数量无法揭示的。

审稿与评论人工作留下了可见的痕迹:一份指出识别策略真正弱点的评论报告、一项推翻或证实已发表结果的公开复制研究、一条捕捉到设定搜索问题的评论。这些都调用了这个学术群体赖以评分的同一种文献解读能力。

经济学评估标准,初稿

经济学评估既看因果主张的识别方式,也看系数是否显著;该领域的可信度革命是本标准的核心所在。

识别策略
研究设计分离出所主张的因果关系,其所依赖的假设——工具变量的相关性、平行趋势假设、断点变量的连续性——是被论证的,而非仅仅被断言的。
稳健性纪律
结果在合理的设定选择下保持稳定,削弱该发现的替代设定被如实报告,而非被略去。
数据与代码透明度
实证流程可从头到尾重新运行,样本构建有据可查,结果可从公开内容中复现。
外部效度的诚实度
结论明确说明所覆盖的总体与情境,超出该情境的外推被明确论证,而非通过措辞含蓄暗示。

经济学创始评审员将首先对该草稿进行压力测试——包括与其自身过去的工作相互对照。

评估标准的初稿可能包含项目合作伙伴的贡献。合作伙伴在评分中不具任何分量。

经济学创始评审员的职责

首先,拆解这套评分标准:找出它在哪些地方以技术复杂性凌驾于真正的识别策略之上,在哪些地方惩罚了诚实的探索性工作,以及哪些维度根本无法从真实成果中评分。

然后对公开工作论文与政策分析进行校准轮次,各自独立评分并比较差异,使该平台首次公开的评分附带已知的不确定性,而非虚假的精确度。

随着社区的开放,这些校准记录将为权重系统提供基础数据:最早的经济学家,其评估历史本身就是评估工具的一部分。

适合哪些人

创始队列正在寻找判断力已在日常工作中发挥作用的经济学家,无论他们身处何处:

  • 以识别策略为真正专长的应用微观经济学家与计量经济学家。
  • 最佳工作成果存在于内部备忘录中的中央银行、政策智库与科技公司经济学家。
  • 初次阅读即能发现薄弱工具变量或设定搜索问题的评论人与审稿人。
  • 实证严谨性超越其发表数量的研究生与博士后研究者。

不适合哪些人

自我筛选比我们设置的任何门槛都更重要,以下是坦诚的说明:

  • 追求快速获得资质认证的人——创始阶段产出的是标准,而非徽章。
  • 希望推广自身研究发现的研究者;此处的评估对象是他人的成果,依据已公开的评分标准进行。
  • 不愿接受评估准确性被追踪的人——校准记录正是整个设计的核心所在。
  • 现在就需要一个可用评分平台的人;本页所描述的机制仍在设计阶段,这个时态是有意为之的。

申请成为经济学评估员

申请表中已预先选择经济学方向。请附上可供查阅的 SSRN 或 NBER 列表、ORCID 主页或代码仓库。

VocaidDeep