SPEC使数千个基准测试结果无效
导读 标准性能评估公司(SPEC)的任务是维护计算组件的标准化基准,该公司已使英特尔至强芯片的2,600多项结果无效。该非盈利联盟透露,它将不再发...
标准性能评估公司(SPEC)的任务是维护计算组件的标准化基准,该公司已使英特尔至强芯片的2,600多项结果无效。
该非盈利联盟透露,它将不再发布运行特定版本英特尔编译器的英特尔PC的SPECCPU2017结果。
该决定源于对该联盟所描述的针对特定工作负载的有针对性的优化的担忧。换句话说,SPEC指责英特尔调整其产品以获得更好的基准测试结果。
SPECCPU2017是广泛用于高端服务器、数据中心和工作站的基准测试,总共测试了43个基准测试的性能。争议与英特尔oneAPIDPC++/C++编译器有关,据称该编译器针对523.xalancbmk_r/623.xalancbmk_s基准进行了优化。
现在,超过2,600个结果附加了免责声明:“用于此结果的编译器正在执行编译,该编译使用先验知识专门提高了523.xalancbmk_r/623.xalancbmk_s基准测试的性能”,从而使结果无效。
尽管基准数据通常不能反映现实世界的条件,但测试的设计目的是尽可能逼真,因此为满足特定基准而设计的优化可能会导致偏差(且不切实际)的结果。
根据Phoronix的报告,2022.0至2023.0的型号受到影响,该日期范围两侧的型号不受免责声明的影响。文章继续说道:“SPECCPU特定优化可能会导致总体SPECint速度提升9%,SPECint速率提升约4%。”
郑重声明:本文版权归原作者所有,转载文章仅为传播更多信息之目的,如作者信息标记有误,请第一时候联系我们修改或删除,多谢。