加州大学伯克利分校排名作假,USNEWS 是如何计算排名的?

加州大学伯克利分校排名作假,USNEWS 是如何计算排名的?

决定去哪里上学是一件很困难的事。在高等教育中,质量这个概念比衣服和流媒体音乐等商品更加模糊。但我们还是可以参照一些排名标准来选择适合的学校,比如每年的U.S. News最好大学排名

不过就在最近,U.S. News官方发布通告称包含加州大学伯克利分校在内的五所大学在2019年最佳大学排名中误报相关数据,致使这五所院校在排名中高于实际情况。承认误报数据的5所大学是:加州大学伯克利分校、斯克里普斯学院、马尔斯西尔大学、北卡罗来纳大学彭布罗克分校和约翰逊威尔士大学。对此,U.S. News决定将这五所大学从排名中移除到 “无排名” 分类中,直至下次排名时这五所院校提供符合要求的准确数据,而其他院校排名将保持不变。

据悉,约翰逊威尔士大学向U.S. News官方承认他们曾多年夸大学校的财政支出预算,而加州大学伯克利分校自2014年起就虚报校友捐赠率,连续四年夸大数值。此外,斯克里普斯学院和马尔斯西尔大学也存在夸大校友捐赠率现象。另外一所院校,北卡罗来纳大学彭布罗克分校增提供了虚高的 “前25%高中班级” 生源数据。

虚报这些指标就会使得排名产生差别么?为什么这些学校选择虚报这类数据呢?今天,我们就一同来关注下U.S. News的高校排名究竟是如何评选的?为何被业内如此认同呢?

U.S. News的排名是根据16项学术质量指标对高校进行评估。它们可以让你根据一些被广泛接受的优秀指标,如第一年的学生保留率、毕业率和师资力量,对美国大学进行比较。当你查看你list上的大学时,你可能会发现不熟悉的学校也有类似的指标,从而拓宽你的选择。

与排名一起的是一个可搜索的学校简介的在线目录。每一项都包括排名中使用的数据、学校的用户评论,以及申请、学术、学费、学生生活、安全、服务、研究生就业和薪资结果方面等关键特征。由于U.S. News是直接对学校进行调查的,这些数据在其他任何地方都不容易获得。

综合来看,排名和个人资料,再加上大学访问、面试和你自己的直觉,这些都可以成为你寻找合适大学的有力工具。

为了进行有效的对比,学校按照学术偏向分成10类,进行10种不同的排名。

· 综合性大学(National Universities)提供全方位的本科专业,加上硕士和博士课程,并强调教师的研究。
· 综合性文理学院(National Liberal Arts Colleges)几乎完全专注于本科教育。他们授予至少50%的艺术和科学学位。
· 地区大学(Regional Universities)提供广泛的本科学位和一些硕士学位项目,几乎没有博士项目。
· 地区学院(Regional Colleges)注重本科教育,但文科学位的授予比例不到50%。这类学校还包括那些拥有少量学士学位项目,但主要授予两年制副学士学位。地区大学和地区学院被进一步划分为四个地理组:北部、南部、中西部和西部。

U.S. News遵循卡内基高等教育机构分类的基本分类体系来决定学校在排名中的位置。2016年2月,卡内基发布了官方更新的分类体系——称为 “2015年更新” ——包括基本系统。U.S. News从2017年的最佳大学排名开始使用2015年的更新体系。从去年的2018年排名到今年的2019年排名,没有哪所大学改变过分类体系。

卡耐基分类是高等教育研究人员广泛使用的分类方法,自1983年U.S. News首次发布排名以来,它一直是最佳大学排名分类系统的基础。美国教育部和许多高等教育协会使用卡内基系统来组织或标注他们的数据。在某些情况下,卡内基分类法被用来确定大学申请助学金的资格。简而言之,卡内基分类是美国高等教育的公认标准。

U.S. News仅凭客观的数据就能确定每所学校的排名。不参观宿舍楼,不与招聘人员交谈,也不进行不科学的学生调查。

该排名公式完全使用了教育专家提出的作为学术质量可靠指标的统计定量和定性指标。为了计算每个类别中每所学校的整体排名,下面列出了多达16个衡量学术优秀程度的指标,这些指标的权重反映了U.S. News对这些指标重要性的研究判断。为了便于展示,我们将这些指标分为以下几组:成果、师资力量、专家意见、财政资源、优秀学生和校友捐赠。

与2018年版相比,U.S. News改变了多个指标的权重,下降了一个指标。指标及其在排名公式中的权重和每一项指标的解释如下。

超过三分之一的学校排名来自于其成功地在正常时间(6年)内留校和毕业的学生。它在我们的排名中占有最高的权重,因为从招聘本科生的雇主和研究生项目的反馈来看,完成学位是非常必要的。我们从社会流动性(5%)、毕业和留校(22%)以及毕业率表现(8%)的角度来衡量结果。

社会流动性:今年,U.S. News考虑了一所学校在促进社会流动性方面取得的成功,方法是统计获得联邦佩尔助学金的毕业生(这些学生通常来自家庭年收入低于5万美元的家庭,佩尔助学金的大部分发放对象是家庭总收入低于2万美元的学生)。下面是影响社会流动性的两个指标。

•佩尔助学金的毕业率加权为2.5%。这个新的排名指标以绝对标准衡量佩尔助学金学生的成功。为了计算这一指标,我们使用了2011年秋季入学的新生中接受佩尔助学金的学校的六年毕业率。这项调查评估了每所学校低收入家庭毕业生的表现。较高的佩尔助学金毕业率比较低的分数要好。
•佩尔•格兰特(Pell Grant)与其他所有学生相比的毕业率加权为2.5%。这一额外的新排名因素比较了同一所学校2011年秋季新入学的Pell学生的6年毕业率,以及同一所学校非Pell学生的6年毕业率。毕业率等于或大于非毕业率的少数学校得分最高。总的来说,这一指标评估了每一所学校在相对于其他所有学生而言,支持来自服务水平低下背景的学生方面的表现。与非佩尔毕业率相比,一所学校的佩尔毕业率越低,它在这一指标上的得分就越低。

新的社会流动性指标的分数会根据获得佩尔助学金的入学率进行调整,因为低收入家庭学生的比例越大,实现低收入家庭学生毕业率越高的目标就越具有挑战性。

U.S. News在2019年最佳大学排名中加入了社会流动性指标,再加上毕业率表现,将经济多样性纳入了占排名13%的指标。

其他成衡量指标包括:

毕业率和留校率:大一新生在大二返校并最终毕业的比例越高,学校就越有可能提供学生成功所需的课程和服务。这包括两个部分:

•六年平均毕业率为17.6%,低于2018年的18%。
•第一年的平均保留率为4.4%,低于2018年的4.5%。

毕业率表示一个毕业班在6年或更短时间内获得学位的平均比例,我们考虑了从2008年秋季开始到2011年秋季的一年级学生班级。第一年留校率是指2013年秋季至2016年秋季入学并于次年秋季返校的一年级学生的平均比例。毕业率的重要性是留校的四倍,2019年的权重为22%,低于2018年的22.5%。

毕业率表现:我们将每所大学的实际六年毕业率与我们对2011年秋季入学人数的预测进行了比较。预测的比例是根据入学数据、获得佩尔助学金的本科生比例、学校财政资源以及综合性大学的数学和科学(STEM)方向来建模的。2019年的权重为8%,高于2018年的7.5%。

usnews.com公布的2019年最佳大学的毕业率和留校率数值排名,是基于一所学校在以下四个排名指标上的总分:六年平均毕业率、第一年平均保留率、佩尔助学金毕业率和与其他所有学生相比的佩尔助学金毕业率。此前,usnews.com公布的毕业率和留校率数值排名是只是基于一所学校在这两个排名指标上的总分: 平均六年毕业率和平均第一年留级率。

研究表明,学生接触高质量教师的机会越大,他们在课堂上的参与度就越高,他们学到的东西也越多,毕业的可能性也越大。U.S. News使用了2017-2018学年的5个因素来评估一所学校对教学的投入程度:班级规模、教师薪资、所在领域最高学位的教师、师生比例和全职教师比例。

· 班级规模是衡量教师资源最重要的指标,占8%。小班授课比例越大,学校得分越高。在该指数中,班级学生人数少于20人的学校在2017年秋季本科课程中所占比例最高。20至29名学生的班级排名第二,30至39名学生排名第三,40至49名学生排名第四。拥有50名或50名以上学生的班级没有分数。
· 教师工资加权为7%,是2016-2017学年和2017-2018学年的平均教师工资加上福利,使用咨询公司Runzheimer International的指标,根据地区生活成本差异进行调整。
· U.S. News还考虑了在各自领域拥有最高学位的全职教师比例(3%)、学生与教师比例(1%)以及全职教师比例(1%)。

我们调查了顶尖学者们——校长、教务长和招生主任——请他们对自己熟悉的同行院校的学术质量进行打分,分值为1(边缘)至5(杰出)。为了获得另一组重要意见,U.S. News还通过邓白氏律师事务所 (Dun & Bradstreet)旗下MDR公司提供给U.S. News的电子邮件,调查了来自美国50个州和华盛顿特区的公立、私立和教区高中的近24,400名辅导员。

学术声誉很重要,因为它考虑到了一些在其他地方无法轻易捕捉到的因素。例如,一个以创新教学方法而闻名的机构可能在这一指标上表现得特别好,而一所难以保持其认证的学校可能表现得很差。

· 这项同行评估调查的平均结果来自2017年春季和2018年。综合性大学和综合性文理学院的这一比例为15%;地区高校占20%(低于2018年的22.5%)。在4589名接受调查的学者中,35.5%的人做出了回应。这一回复率低于2017年春季的40.4%和2016年春季的39%。

· 高中辅导员评估调查的平均结果来自2016年春季,2017年和2018年。它的权重为5%(低于2018年的7.5%),只适用于综合性大学和综合性文理学院。在高中辅导员调查中,大约一半的高中辅导员(12,200人)被要求给综合性大学排名类别的学校打分,另一半被要求给综合性文科类别的学校打分。

每名学生的支出表明,一所大学可以提供各种各样的项目和服务。U.S. News通过使用2016和2017财政年度每个学生在教学、研究、学生服务和相关教育支出上的平均支出来衡量财政资源。在体育、宿舍和医院上的花费不算。

一所学校的学术氛围受其招生的选择性所影响。简而言之,在高中期间取得优异成绩和考试成绩的学生,成功完成具有挑战性的大学课程的可能性最高;使教师能够设计严格的课程。

作为2019年的新指标,接受率(占去年排名的1.25%)已完全从排名计算中剔除,为新的社会流动性指标腾出空间。

此外,我们还减少了评估2017年秋季入学考试剩下的两个优秀学生因素的权重——标准化考试和高中班级排名。

标准化测试:U.S. News对所有参加SAT和composite ACT数学和基于证据的阅读和写作部分考试的学生的入学考试成绩进行统计。今年排名中使用并发布在usnews.com上的SAT成绩,是从2016年3月开始的SAT新考试。

我们对标准化考试的权重为7.75%,低于2018年的8.125%。

学校有时会在以下几类学生中不上报SAT和ACT成绩:运动员、国际学生、少数族裔学生、遗留学生、特殊安排录取的学生和2017年夏季入学的学生。U.S. News将排名模型中使用的SAT/ACT综合百分位数分布值降低了15%。这种做法并不新见,自1997年的排名以来,U.S. News一直对这种情况不以为然,因为把学生排除在外的结果可能是忽略了较低的分数。《U.S. News还指出,一些学校拒绝告诉U.S. News是否所有SAT和ACT成绩的学生都有上报。

如果2017年秋季入学新生提交考试成绩的总比例低于所有新入学新生的75%,那么其在排名中使用的SAT/ACT百分位分配值的总和将被折现15%。U.S. News在之前的排名中也采用了这一政策。

高中班级排名:U.S. News综合了综合性大学和综合性文理学院入学一年级学生中高中成绩前10%的比例。对于地区大学和地区学院,我们使用的是高中毕业于班级前四分之一的学生的比例。

我们的权重为2.25%,低于2018年的3.125%。

这是在2015-2016年和2016-2017年期间向学校捐赠的在职本科毕业生的平均比例。衡量学生的满意度和研究生的参与度。

对所有16项指标的加权标准化值进行求和和转换,使符合条件的每所学校的总分都在0到100分之间,表现最好的学校得分为100分。最后,学院和大学按总分的降序排列,并列排名。排名前75%的学校会在usnews.com上显示自己的排名。对于表现较差的学校,U.S. News决定只显示该排名类别中排名靠后的四分之一。

大多数大学直接向U.S. News上报这些数据。今年,92%的排名机构在2018年春季数据收集窗口期间返还了统计信息。

为了保证质量,学校向U.S. News报告的排名数据是通过算法与往年提交的排名数据和第三方数据进行比较的。受访者被要求审查、修订和核实任何标记的数据,以便提交他们的调查。随后,U.S. News的数据分析师对提交数据的真实性进行了严格审查,并要求学校进一步确认或修改数据。

我们从教育援助委员会(校友捐赠率)和美国教育部国家教育统计中心(财政、师资、SAT和ACT、毕业率和留职率)获得了缺失的数据。U.S. News在排名计算中使用了未显示的估计值,而这些估计值是在学校未能报告无法从这些数据来源获得的排名指标数据点时得出的。缺失的数据在usnews.com上被报告为“N/A”。拒绝完全填写U.S. News调查的学校被列为“无应答者”。

U.S. News总共收集了1,800多家获得地区独立认证的机构的数据。虽然所有学校的数据都出现在usnews.com上,但只有不到1400所学校上榜。

共有126所大学未上榜。这一称号最典型的原因有两个:

· 它们属于U.S. News未列入其排名类别的卡内基分类。其中包括85所高度专业化的艺术、商业和工程学校。
· 他们报告说,在首次申请、第一年申请学位的申请人的录取决定中,既没有使用SAT分数,也没有使用ACT分数。

注:如果潜在学生提供SAT和ACT成绩,并且这些学校也包括在排名之内,那么采用可选考试或灵活考试招生政策的学校仍然在招生过程中使用这些SAT和ACT成绩。许多根本不使用标准化考试的学校主要管理针对中年职业成人的非传统学位完成项目。

在非常罕见的情况下,学院之所以没有排名,是因为它们的本科生和研究生总数不足200人,在2017年和2018年的调查中,它们获得的累计同级评估评分不到10分,或者其他一些狭隘的原因。

与那些不排序的不同,如果一些学校仅仅是州认可的或没有认证,那它们的本科学位会不参加U.S. News的最佳大学评比。分校的分数受主校影响。

原文作者:Robert Morse, Eric Brooks, and Matt Mason

翻译作者:Holly Kong

美工编辑:过儿

校对审稿:冬冬

原文链接:https://www.usnews.com/education/best-colleges/articles/how-us-news-calculated-the-rankings