模型卡
也叫:Model Card · 模型说明卡 · 模型报告卡
模型卡是随模型发布的说明文档,记录预期用途、训练资料、评测方法、结果和已知限制。
他们说
用标准化文档披露模型用途、训练信息、评测结果和已知限制
老白翻译
给模型附一份说明书,写清它在哪些条件下测过、哪里容易出错。
它到底是什么
模型卡是随机器学习模型一起发布的说明文档。它通常记录模型版本、预期用途、训练资料、评测条件、分组结果、许可证和已知限制。
生活里的例子
采购团队看到一个模型总分很高,可以先查模型卡有没有中文、长文档和本行业数据的结果,再决定补哪些测试。
常见误解
- 误解:模型卡就是榜单截图。 跑分只是一部分,用途、数据、方法与限制同样要写。
- 误解:模型卡能证明模型适合所有任务。 它只说明已经披露和测过的条件。
- 误解:发布者写了就不用再验。 使用者仍要拿自己的真实输入做独立测试。
普通人怎么用
先核对模型版本、语言、任务、数据集与许可证,再把缺失条件变成上线前的测试题。