Return to Video

如何阅读经济学研究论文:随机对照试验(RCTs)

  • 0:01 - 0:05
    - [讲解员] 在掌握计量经济学的道路上
  • 0:06 - 0:09
    小徒弟Kamal也取得了巨大的进步
  • 0:09 - 0:14
    他充分发挥了自己的能力
    战胜了他的敌人
  • 0:14 - 0:17
    可惜今天,他情绪低落
  • 0:17 - 0:20
    因为有一项挑战尚未解决:
  • 0:20 - 0:24
    Kamal还无法解读
    学术研究期刊的论文
  • 0:24 - 0:27
    比如《美国经济评论》
  • 0:27 - 0:29
    和《计量经济学》等期刊
  • 0:29 - 0:34
    在他看来,这些似乎是用
    晦涩难懂的外语写的
  • 0:34 - 0:35
    - [Kamal] 怎么回事...?
  • 0:37 - 0:40
    -[讲解员] 对于新手Kamal来说
    它们是模糊不清的
  • 0:40 - 0:42
    但可以通过学习来解析
  • 0:42 - 0:45
    让我们一起来阅读,学习
  • 0:48 - 0:52
    随机对照试验
  • 0:53 - 0:54
    让我们深入研究
  • 0:54 - 0:58
    发表在《教育经济学评论》上的
    西点军校的研究
  • 0:59 - 1:02
    此论文讲述了
    对“经济学101”的学生
  • 1:02 - 1:06
    是否使用电子设备进行了随机评估
  • 1:06 - 1:09
    首先,快速回顾其研究设计
  • 1:09 - 1:11
    - 好的
  • 1:12 - 1:16
    - [Josh] 在西点军校-
    一所专门培训美国陆军军官的学院
  • 1:16 - 1:17
    计量学大师们
  • 1:17 - 1:20
    设计了一项随机试验
    以回答这个问题
  • 1:21 - 1:22
    按照不同的规则
  • 1:22 - 1:27
    这些大师随机分配学员
    到经济学的不同班级
  • 1:27 - 1:29
    与大多数美国大学不同
  • 1:29 - 1:32
    西点军校本来的规定是
    不许使用电子设备
  • 1:32 - 1:36
    为了这个实验
    一些学生获得了特许
  • 1:36 - 1:39
    不在这种传统、无电子产品的班里:
  • 1:39 - 1:42
    没有笔记本电脑,没有平板电脑
    没有手机!
  • 1:43 - 1:46
    这是对照组,或基准
  • 1:46 - 1:49
    另一组被允许使用电子产品
  • 1:49 - 1:53
    这就是实验组
    受制于一个变化了的环境
  • 1:53 - 1:56
    在此,实验组可以在课堂上
  • 1:56 - 1:59
    无限制地使用笔记本电脑
    或平板电脑
  • 1:59 - 2:02
    每一个因果问题
    都有一个明确的结果
  • 2:02 - 2:05
    我们在研究之前就已定义
    希望影响的变量
  • 2:06 - 2:08
    在西点军校
    使用电子产品的结果
  • 2:08 - 2:10
    是看期末考试的分数
  • 2:11 - 2:14
    该研究的目的是为回答以下问题:
  • 2:14 - 2:18
    用考试分数来衡量
    在课堂使用电子设备
  • 2:18 - 2:20
    与学习的因果关系是什么?
  • 2:21 - 2:26
    - 经济学期刊文章
    通常以描述性统计表格开头
  • 2:26 - 2:29
    列出研究样本的关键因素
  • 2:29 - 2:32
    - 我的天啊,我记得这个表
    太令人困惑了!
  • 2:32 - 2:37
    - [讲解员] 第一列到第三列报告平均特征
  • 2:37 - 2:40
    这样就能知道我们的研究对象
  • 2:40 - 2:43
    让我们从第一列开始
  • 2:43 - 2:45
    它描述了对照组的协变量
  • 2:45 - 2:49
    协变量是在实验开始之前测量的
  • 2:49 - 2:52
    对照组和实验组的特征
  • 2:52 - 2:57
    例如,我们看到对照组的平均年龄
    略高于20岁
  • 2:58 - 3:01
    许多协变量都是虚拟变量
  • 3:01 - 3:06
    虚拟变量只能有两个值 --
    0或1
  • 3:06 - 3:10
    例如,学生性别是虚拟变量
  • 3:10 - 3:13
    女性等于1,男性等于0
  • 3:13 - 3:17
    该变量的平均值为女性比例
  • 3:17 - 3:21
    我们还发现,对照组中
    有13%是西班牙裔
  • 3:21 - 3:24
    19%服过兵役
  • 3:25 - 3:27
    表中的注释是关键
  • 3:27 - 3:29
    请在阅览表时参考这些
  • 3:29 - 3:34
    这些注释解释了
    每列和每个面板中的内容
  • 3:39 - 3:42
    例如,这些注释告诉我们
  • 3:42 - 3:45
    标准偏差用括号注明
  • 3:46 - 3:50
    标准差告诉我们数据的离散情况
  • 3:50 - 3:55
    例如,0.52的标准差告诉我们
  • 3:55 - 3:59
    大多数对照组的GPA
    落在2.35
  • 3:59 - 4:03
    也就是比2.87的平均GPA低0.52
  • 4:03 - 4:08
    和3.39之间
    也就是比2.87高0.52
  • 4:09 - 4:12
    较低的标准偏差味着GPA
  • 4:12 - 4:15
    更紧密地聚集在平均值周围
  • 4:15 - 4:18
    -[Kamal] 是啊,但大多数变量
    都没有标准偏差
  • 4:18 - 4:19
    -没错
  • 4:19 - 4:22
    大师们通常都会忽略
    虚拟变量的标准偏差
  • 4:22 - 4:26
    因为变量的平均值
    决定了其标准偏差
  • 4:28 - 4:30
    本研究将两个实验组
  • 4:30 - 4:32
    与对照组进行比较
  • 4:32 - 4:36
    第一组可以随便使用
    笔记本电脑和平板电脑
  • 4:36 - 4:38
    第二个实验组的限制性强些
  • 4:38 - 4:42
    只允许将平板电脑
    放在桌子上使用
  • 4:42 - 4:45
    实验组看起来与对照组很接近
  • 4:47 - 4:51
    这将带我们到该表的下一个特征
    第四列到第六列
  • 4:51 - 4:55
    使用统计测试来比较实验前
  • 4:55 - 4:58
    实验组和对照组的特征
  • 4:58 - 5:02
    在第四栏中,两个实验组被合并了
  • 5:02 - 5:05
    可以看到实验组和对照组的
  • 5:05 - 5:10
    女性比例差异仅为0.03
  • 5:11 - 5:14
    这种差异在统计学上并不显著
  • 5:14 - 5:17
    在样本选择过程中
  • 5:17 - 5:21
    我们可以很容易地
    将其归结为偶然结果
  • 5:21 - 5:22
    - 那我们怎么知道?
  • 5:22 - 5:24
    - [讲解员] 记得经验法则吗?
  • 5:24 - 5:30
    绝对值超出标准误差两倍的统计估计
  • 5:30 - 5:34
    通常在统计学上是有显著性的
  • 5:35 - 5:39
    标准误差为0.03
  • 5:39 - 5:41
    与女性比例差异相同
  • 5:42 - 5:46
    因此,后者与前者的比率仅为1
  • 5:46 - 5:49
    这当然小于2
  • 5:49 - 5:51
    - [Kamal] 哦!所以
    表中的实验/对照差异
  • 5:51 - 5:54
    均不超过其标准误差的两倍
  • 5:54 - 5:56
    -[讲解员] 正确
  • 5:56 - 5:59
    随机划分的学生似乎成功地
  • 5:59 - 6:02
    创建了确实具有可比性的群体
  • 6:03 - 6:05
    因此,我们可以确信
  • 6:05 - 6:08
    课堂成绩随后的任何差异
  • 6:08 - 6:11
    都是实验干预的结果
  • 6:11 - 6:15
    而不是先前存在的差异的反映
  • 6:15 - 6:17
    做到了“其他条件不变”!
  • 6:17 - 6:20
    - [Kamal] 酷,等等
  • 6:20 - 6:23
    底部有星号的数字呢?
  • 6:23 - 6:26
    这些差异是标准误差的两倍以上
  • 6:26 - 6:27
    -[讲解员] 好眼力,Kamal!
  • 6:27 - 6:29
    该表中有许多数字
  • 6:29 - 6:32
    面板B中的也很重要
  • 6:32 - 6:36
    它们测量实验组和对照组的学生
  • 6:36 - 6:39
    在课堂上使用电脑的程度
  • 6:40 - 6:43
    这组的实验是允许电脑的使用
  • 6:43 - 6:45
    研究人员必须证明
  • 6:45 - 6:47
    被允许使用电脑的学生
  • 6:47 - 6:49
    利用了这个机会
  • 6:50 - 6:53
    如果他们没有使用,那就没有实验了
  • 6:54 - 6:57
    幸运的是,第一实验组中
  • 6:57 - 6:59
    81%的人使用了电脑
  • 6:59 - 7:02
    而对照组中没有人使用电脑
  • 7:02 - 7:05
    第二个平板电脑实验组的许多人
  • 7:05 - 7:07
    也使用了电脑
  • 7:07 - 7:10
    电脑的使用方面差异很大
  • 7:10 - 7:12
    而且具有统计显著性
  • 7:12 - 7:15
    我们还可以看到每组的样本量
  • 7:15 - 7:18
    - [Kamal] 星号是装饰吗?
  • 7:18 - 7:21
    -[讲解员]有些学术论文用星号来表示
  • 7:21 - 7:24
    在统计学上有显著性的差异
  • 7:24 - 7:27
    这可以引起人们的注意
  • 7:27 - 7:32
    这里,三个星号表示结果在统计上
  • 7:32 - 7:36
    p值偏离零假设的概率小于1%
  • 7:36 - 7:39
    换句话说,这个结果纯粹是偶然的
  • 7:39 - 7:42
    概率不到1/100
  • 7:43 - 7:49
    两个星号表示偶然发现的机率
    为1/20或5%
  • 7:49 - 7:52
    一个星号代表
    10%我们看到的结果
  • 7:52 - 7:56
    仅归因于偶然
  • 7:56 - 8:00
    如今,星号被视为有点过时
  • 8:00 - 8:02
    有些期刊把它们省略了
  • 8:02 - 8:04
    -[Kamal]那最后两列呢?
  • 8:04 - 8:08
    -[讲解员] 与将两个实验组
    合并为一的第四列不同
  • 8:08 - 8:14
    后两列分别查看每个实验组的
    实验/对照差异
  • 8:15 - 8:18
    这提供了更详细的平衡分析
  • 8:18 - 8:21
    另外,就目前而言
    你可以忽略此行
  • 8:21 - 8:24
    它将用于另一项显著性
    测试
  • 8:25 - 8:29
    现在我们来看看这篇文章的精华:
    表四
  • 8:30 - 8:33
    此表报告电子设备的使用
  • 8:33 - 8:37
    对学生学习成绩影响的回归估计
  • 8:37 - 8:40
    -[Kamal] 为什么这项研究
    报告回归估计?
  • 8:40 - 8:43
    这就是我不明白的原因
  • 8:43 - 8:45
    我以为
    我们喜欢随机试验的一个原因是
  • 8:45 - 8:48
    只需比较实验组和对照组
  • 8:48 - 8:50
    就可以获得因果关系
  • 8:50 - 8:54
    由于这些组是平衡的
    没有必要使用回归
  • 8:54 - 8:55
    -[讲解员] 说得好,Kamal
  • 8:55 - 8:59
    实际上,出于两个原因
  • 8:59 - 9:01
    报告回归估计是惯例
  • 9:01 - 9:04
    首先,尽管有证据表明
    二者之间存在平衡
  • 9:04 - 9:07
    但如果过于谨慎
    分析师可能会考虑到
  • 9:07 - 9:10
    二者之间的偶然性差异
  • 9:10 - 9:14
    其次,回归估计可能更为精确
  • 9:14 - 9:17
    也就是说,与简单的实验对照比较相比
  • 9:17 - 9:19
    它们具有更低的标准误差
  • 9:20 - 9:23
    本研究中的因变量
  • 9:23 - 9:24
    是我们感兴趣的结果
  • 9:25 - 9:26
    既然眼前的问题是
  • 9:26 - 9:29
    课堂电子设备如何影响学习
  • 9:29 - 9:33
    一个适合的结果
    就是经济学期末考试的分数
  • 9:33 - 9:38
    每列报告不同回归模型的结果
  • 9:38 - 9:40
    除了实验组之外
  • 9:40 - 9:44
    模型还通过控制变量
    或协变量进行区分
  • 9:45 - 9:48
    没有协变量的估计
  • 9:48 - 9:51
    是对实验组和对照组的简单比较
  • 9:51 - 9:53
    -[Kamal] 我还以为他们忘了填写呢
  • 9:53 - 9:56
    -[讲解员]第一列显示,电子设备的使用
  • 9:56 - 10:01
    使期末考试分数减少0.28标准差
  • 10:02 - 10:03
    在我们的上一课中
  • 10:03 - 10:07
    Joshway大师解释说
    我们使用标准差单位
  • 10:07 - 10:11
    因为这些单位在不同的研究中很容易比较
  • 10:11 - 10:13
    第二列报告了
  • 10:13 - 10:16
    添加人口统计控制的模型的结果
  • 10:16 - 10:20
    在这里,我们比较测试分数
    但持有不变的因素
  • 10:20 - 10:21
    如年龄和性别
  • 10:22 - 10:23
    第三列报告了
  • 10:23 - 10:27
    将GPA添加到协变量列表中的
    模型的结果
  • 10:28 - 10:31
    第四列增加了ACT分数
  • 10:31 - 10:34
    分析师经常以这种方式报告结果
  • 10:34 - 10:37
    首先是包含很少或没有协变量的模型
  • 10:37 - 10:40
    然后逐列报告
  • 10:40 - 10:44
    添加越来越多协变量的模型估计值
  • 10:44 - 10:47
    逐列观察,你注意到了什么?
  • 10:47 - 10:50
    -[Kamal] 使用电脑的相关系数
  • 10:50 - 10:52
    总是一个相当大的负数
  • 10:52 - 10:53
    - [讲解员] 没错!
  • 10:53 - 10:56
    我们还可以看到,标准误差小到
  • 10:56 - 11:01
    足以使这些负面结果具有统计显著性
  • 11:01 - 11:04
    换句话说,这个实验的主要收获是
  • 11:04 - 11:08
    使用电子设备影响了学生的学习
  • 11:09 - 11:12
    - [Kamal] GPA和ACT的分数
    也很显著
  • 11:12 - 11:14
    原因何在?
  • 11:14 - 11:15
    -[讲解员]观察的很好!
  • 11:15 - 11:17
    这并不奇怪
  • 11:17 - 11:20
    我们期望这些变量
    能预测在大学里的表现
  • 11:20 - 11:22
    -[Kamal] 哦,没错
  • 11:22 - 11:24
    之前取得很好成绩的孩子
  • 11:24 - 11:26
    更有可能在这门课程中
    取得较好的成绩
  • 11:26 - 11:30
    -[讲解员] 你还会注意到这表中的
    许多其他信息
  • 11:30 - 11:35
    表中的其余面板报告了电子设备的使用
  • 11:35 - 11:37
    对期末考试组成部分的影响
  • 11:37 - 11:40
    如选择题
  • 11:40 - 11:43
    这些结果大多与电脑的使用
  • 11:43 - 11:45
    对总体得分的影响一致
  • 11:45 - 11:48
    -[Kamal] 那行不是英文的行呢?
  • 11:48 - 11:51
    -[讲解员] 它们提供了其他统计信息
  • 11:51 - 11:54
    r 平方是拟合优度的度量
  • 11:55 - 11:57
    尽管有些读者可能想知道
  • 11:57 - 11:58
    但这并不太重要
  • 11:59 - 12:03
    其他行报告具有统计显著性的替代测试
  • 12:03 - 12:05
    你目前也可以忽略
  • 12:05 - 12:08
    -[Kamal] 哦,我的天
    这些表没有那么难嘛!
  • 12:08 - 12:09
    非常感谢您
  • 12:09 - 12:12
    -[讲解员] 接下来是要讲的是回归
  • 12:12 - 12:13
    再见!
  • 12:16 - 12:17
    ♪ [音乐] ♪
  • 12:17 - 12:21
    你正在掌握计量经济学的路上
  • 12:21 - 12:23
    为确保自己能够记住这个视频里的内容
  • 12:23 - 12:25
    请回答一些快速的练习题
  • 12:25 - 12:29
    或者,如果你已准备好
    请点按以观看下一个视频
  • 12:29 - 12:32
    你还可以查看MRU的网站
  • 12:32 - 12:35
    那里有更多课程、教师资源等
Titolo:
如何阅读经济学研究论文:随机对照试验(RCTs)
Descrizione:

more » « less
Video Language:
English
Team:
Marginal Revolution University
Progetto:
Mastering Econometrics
Duration:
12:40

Chinese, Simplified subtitles

Revisioni Compare revisions