过度挖掘NAEP数据

伟德1946英国

一个最近的博客Stephen Sawchuk警告说,即使是对数据丰富的考试,如NAEP(联邦管理的全国教育进展评估)的分析,也可能因误解而崩溃。

NAEP提供了一个信息金矿。由于它每年对来自多个地区和州的学生进行抽样调查,因此可以比较各州的成绩趋势。而且,由于NAEP不承担责任,它不太容易受到可能危及其他考试的游戏和作弊的影响。

但Sawchuk警告说,一些分析师的解释超出了NAEP所能支持的范围。各种各样的政策倡导者都声称NAEP是各种立场的佐证点。然而,NAEP只提供了分数和政策之间相关性的证据——任何上过统计101的人都知道,相关性不能证明因果关系

另一个常见的错误是过分强调测试的纵向性质——虽然它提供了多年的数据,但它测试的不是同一组学生。

因此,对于所有那些NAEP数据勘探者来说,请记住,尽管NAEP信息丰富,但如果你试图过度推销NAEP所能提供的信息,你可能会发现自己只得到傻瓜的金子。