学的资深视觉组教授扯开了衬衫领口,整个人因为激动变红了。
「25%我是相信的,15%是什麽情况?」
「11%的绝对差距,这不科学!」
「阿西吧,一定是作弊!他们是不是在黑盒测试集上进行了作弊?对,只有提前拿到斯坦福的测试集去进行有针对性的过拟合,才有可能跑出这种吓人的数据!」刚刚还合十祈祷的首尔国立大学领队,根本不相信屏幕上显示的错误率。
「闭嘴吧,寒国人,ImageNet的评测伺服器是斯坦福独立脱机运行的,测试集在开赛前才由李教授的团队亲自导入,你告诉我他们怎麽作弊?用特异功能吗?」一旁的阿姆斯特丹大学领队惊讶之余,也不忘怼他。
「漆、漆昊——」
陈工咽了口唾沫,他感觉自己心脏几乎要跳出嗓子眼了!
「我没看错吧?我们在学校实验室里跑十折交叉验证时,由於那几块GTX580显卡可怜的显存限制和保守估计的数据集偏差,测出来的成绩不错,但那是验证集,和测试集数据不同,怎麽一到斯坦福的官方测试集上,这错误率直接到了15%?!」
漆昊此时也有些错愕。
深度卷积神经网络在CUDA的并行算力下,对局部图像特徵的捕捉会表现出非同寻常的优越性,但他没想到,实际错误率比他预估中还低。
此时李教授拿着话筒上台了。
东京大学团队的人立刻大声问道:「李教授,请问漆昊团队是否将训练集和测试集搞错了?」
面对东京大学代表队不服气的质疑,原本有些嘈杂的主报告厅再次安静了下去,大家都在期待李教授这位ImageNet:挑战赛发起人会怎麽说。
台上李教授,拿起话筒直接解释了起来:「我非常理解东京大学团队,以及在座诸位此时此刻所感受到的震撼和难以置信,但从I mageNet挑战赛的工程逻辑和规则设计来看,你们所质疑的混淆数据集的情况,在物理层面上是绝对不可能发生的。」
「众所周知,为了确保比赛的绝对公平,ImageNet将整个数据集严格划分为三个完全独立的部分。」
「第一部分是包含120万张图片和完整标注的训练集,用於给各大团队进行模型训练,第二部分是包含5万张图片的验证集,用於大家在本地调参数,而真正决定结果,用於计算最终成绩的,是包含10万张图片的测试集。」
「简单说一下区别,拿训
本章未完,请点击下一页继续阅读!