第180章 证据保留压缩定理(14/17)
【模型c:平均准确率最低,只有96.
3%,参数量也只减少了可怜的54%】
“如果按照目前各大顶级会议和企业界的传统评价指标来看,”周志华指着屏幕,“模型A绝对是当之无愧的明星,是所有工程师梦寐以求的最优解。
它的体积变得极其小巧,推理速度极快,而且最不可思议的是,它的准确率甚至还是这三个里面最高的。”
“而那个模型c,压缩率最低,消耗的内存最多,而且在公开数据集上的准确率还垫底,算是失败品。”
江临看着这些数据,冷静地问道:“那份没有参与测试的隐藏集呢?”
“按照你最初邮件里的要求,那份关键的隐藏集,从始至终都由我们学院另外一组独立的人员在隔壁的机房里保管着。”周志华看着江临,“直到现在这一刻,我只知道那个隐藏集里,包含了一批在公开测试集中没有出现过的高危长尾状态。”
“隐藏集里有多少样本?”
“四十八组状态对。
其中包含高风险边界样本,也包含低代价对照组。”
“任务损失和安全动作集合都已经提前标注好了?”
“已经完成独立标注,高风险组里的错误动作可能带来几十万元以上的损失。”
“我们有权限去调用它进行测试吗?”
“作为最终的裁决,只能调用一次。”周志华伸出一根手指,“跑出什么结果,就是什么结果,没有任何修改代码重新跑一次的机会。”
“一次就够了。”江临说道。
南大的研究人员将三套模型逐一导入刚刚完成接口改造的【可信审查脚本】。
脚本的底层来自江临带来的mpS-EvidenceGate通用反例搜索框架。
三套模型的中间表示和公开数据已经提前缓存,任务损失矩阵、证据单元覆盖半径与局部稳定性检查,则是在刚才的讨论中接入的新模块。
审查流程开始运行。
第一步,审查器根据公开数据分布和预先限定的允许假设族,划定可能存在的分歧区域。
第二步,从分歧区域中提取带局部覆盖证书的反例见证基。
第三步,检查三套压缩模型是否在高风险证据单元内发生任务坍缩,以及对应的局部稳定性证书是否仍然成立。
计算开始。
工作站机箱里的cpU和GpU瞬间达到了满载状态,功耗急剧飙升。
那台普通的会议室工作站,内部并没有配置废土二号工作间的异构算力调度系统,也没有能够将热量化为无形的热织网。
在面对这种高强度的空间遍历计算时,它唯一能依靠的,就是机箱里那几只被猛然拉高电压的工业风扇。
风扇的转速在短短十几秒内飙升到了极限,发出阵阵沉闷的轰鸣声。
会议室里的人都屏住了呼吸,没有人说话,只有那单调而急促的风扇轰鸣声在空气中回荡,让人感到一阵莫名的心悸。
漫长而煎熬的四分钟过去了。
屏幕上,审查脚本终于吐出了第一组分析结果。
【模型A】
【为其提取的见证基规模:37 对高危分歧样本】
【触发的任务坍缩次数:12 次】
【未知区域覆盖缺口估计值:0.
083】
【底层审查结果结论:拒绝上线(REJEct)】
紧接着,第二组结果跳了出来。
【模型b】
【见证基规模:41 对】
【触发任务坍缩次数:6 次】
【覆盖缺口估计值:0.
047】
【底层审查结果结论:拒绝上线(REJEct)】
本章未完,请翻下一页继续阅读.........