我们能用得分为零的模型来预测基准测试的准确率吗?
我们能用得分为零的模型来预测基准测试的准确率吗? 我们(共同负责人 @LukeBailey181 @rckpudi)把一个基准测试转化为一系列更简单的带提示版本。联合建模规模 C 与提示等级 H,可以用少 5600 倍的计算量,把 GSM8K 准确率(H=0)预测到 3 个百分点以内 🧵
所有带有「suze_va」标签的 AI 情报。
1 条情报我们能用得分为零的模型来预测基准测试的准确率吗? 我们(共同负责人 @LukeBailey181 @rckpudi)把一个基准测试转化为一系列更简单的带提示版本。联合建模规模 C 与提示等级 H,可以用少 5600 倍的计算量,把 GSM8K 准确率(H=0)预测到 3 个百分点以内 🧵