谷歌 AI 宣布推出大模型基准测试 CardBench
09-05 10:27 来源:csdn 阅读(358)

据 marktechpost 报道,谷歌近日宣布推出大模型基准测试 CardBench,满足对学习型基数估计(cardinality estimation)模型的系统评估框架的需求。


CardBench 是一个综合基准,包含 20 个不同真实数据库中的数千个查询,大大超过了以往的任何基准。这样就能在各种条件下对学习到的万有引力模型进行更全面的评估。该基准支持三种关键设置:基于实例的模型,即在单个数据集上进行训练;零点模型,即在多个数据集上进行预训练,然后在一个未见数据集上进行测试;微调模型,即进行预训练,然后使用目标数据集的少量数据进行微调。