社区评测与基准仓库上线,透明化评分
我们刚刚发布了用于去中心化评测的 Community Evals 和 Benchmark 仓库 🤗
> 你和模型作者报告的分数会出现在排行榜上 🙌🏻
> 基准数据集托管着已报告结果的实时排行榜 🚀
> 你可以通过 PR 添加分数,它们会存储在模型仓库中。
Community Evals 将暴露目前分散在模型卡、论文和基准中的分数。
它不会解决分数差异问题,但它是透明的!
> 你和模型作者报告的分数会出现在排行榜上 🙌🏻
> 基准数据集托管着已报告结果的实时排行榜 🚀
> 你可以通过 PR 添加分数,它们会存储在模型仓库中。
Community Evals 将暴露目前分散在模型卡、论文和基准中的分数。
它不会解决分数差异问题,但它是透明的!