百度被指在图像识别AI测试中作弊

来源:百度文库 编辑:超级军网 时间:2024/04/27 23:31:54
http://www.solidot.org/story?sid=44289


百度在ImageNet图像识别测试中有违规行为
百度
人工智能
WinterIsComing (31822)发表于 2015年06月02日 20时22分 星期二 新浪微博分享 腾讯分享 豆瓣分享 人人分享 网易分享
来自发挥做题的特长部门
百度上个月宣布,它在ImageNet的图像识别人工智能基准测试中取得了全球最好的结果,其图像识别错误率仅为4.58%,而微软是4.94%,Google是4.8%。现在,ImageNet发表声明指出百度在测试中有违规行为:百度的研究人员采用了密集测试的方法提高成绩。在2014年11月28日到2015年5月13日之间,百度异构计算团队的研究人员使用了至少30个账号向测试服务器递交了至少200次,其中3月15日到19日的五天时间内递交了超过40次,违反了每周最多2次递交的规定。ImageNet解释说,通过向测试服务器递交许多个略微不同的方案,百度能根据测试表现从一组相似的方案中挑选出最好的,获得虽然小但潜在巨大的优势;百度能直接根据测试数据对挑选出的方法进一步研究和发展,而不是将测试数据仅仅用于训练和检验。ImageNet指出,百度的测试结果与其他团队的测试结果无法直接比较。

百度相关团队领头人吴韧已经发道歉函了

imageNet声明原文
http://www.image-net.org/challen ... ncement-June-2-2015http://www.solidot.org/story?sid=44289


百度在ImageNet图像识别测试中有违规行为
百度
人工智能
WinterIsComing (31822)发表于 2015年06月02日 20时22分 星期二 新浪微博分享 腾讯分享 豆瓣分享 人人分享 网易分享
来自发挥做题的特长部门
百度上个月宣布,它在ImageNet的图像识别人工智能基准测试中取得了全球最好的结果,其图像识别错误率仅为4.58%,而微软是4.94%,Google是4.8%。现在,ImageNet发表声明指出百度在测试中有违规行为:百度的研究人员采用了密集测试的方法提高成绩。在2014年11月28日到2015年5月13日之间,百度异构计算团队的研究人员使用了至少30个账号向测试服务器递交了至少200次,其中3月15日到19日的五天时间内递交了超过40次,违反了每周最多2次递交的规定。ImageNet解释说,通过向测试服务器递交许多个略微不同的方案,百度能根据测试表现从一组相似的方案中挑选出最好的,获得虽然小但潜在巨大的优势;百度能直接根据测试数据对挑选出的方法进一步研究和发展,而不是将测试数据仅仅用于训练和检验。ImageNet指出,百度的测试结果与其他团队的测试结果无法直接比较。

百度相关团队领头人吴韧已经发道歉函了

imageNet声明原文
http://www.image-net.org/challen ... ncement-June-2-2015