阅收藏：百度在ImageNet图像识别测试中有违规行为

百度上个月宣布，它在ImageNet的图像识别人工智能基准测试中取得了全球最好的结果，其图像识别错误率仅为4.58%，而微软是4.94%，Google是4.8%。现在，ImageNet发表声明指出百度在测试中有违规行为：百度的研究人员采用了密集测试的方法提高成绩。在2014年11月28日到2015年5月13日之间，百度异构计算团队的研究人员使用了至少30个账号向测试服务器递交了至少200次，其中3月15日到19日的五天时间内递交了超过40次，违反了每周最多2次递交的规定。ImageNet解释说，通过向测试服务器递交许多个略微不同的方案，百度能根据测试表现从一组相似的方案中挑选出最好的，获得虽然小但潜在巨大的优势；百度能直接根据测试数据对挑选出的方法进一步研究和发展，而不是将测试数据仅仅用于训练和检验。ImageNet指出，百度的测试结果与其他团队的测试结果无法直接比较。







via Solidot