开源了 GPT 的问题测试集一共 39000,方便大家冷启动批处理问问题

218 天前
 newlin
Our project provides 500 carefully designed questions that can be used to test and evaluate the performance of Generative Pretrained Transformer (GPT) models. The questions cover a variety of topics and domains and are designed to comprehensively examine the performance of GPT models Comprehension, creativity and logical reasoning skills.

https://github.com/zgimszhd61/benchmark4GPT
807 次点击
所在节点    分享创造
1 条回复
cryptogems
218 天前
大致看了一下,这些问题拿到对应的答案之后评价指标是什么,and 中文问题,是不是某种程度上其实没法发挥模型的真实性能,毕竟隔着一层语言的 layer (个人想法)

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/979585

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX