新加坡科研团队推出评估套件INSTRUCTEVAL,专为大语言模型研发

品玩6月9日讯,据 huggingface 显示,新加坡科技设计大学旗下的DeCLaRe Lab 近日联手新加坡阿里达摩院推出评估套件INSTRUCTEVAL。

INSTRUCTEVAL是一款较为全面的评估套件,专为指令调整的大语言模型设计。研发团队表示,INSTRUCTEVAL 的评估基于解决问题、写作能力以及是否和人类的价值观保持一致。INSTRUCTEVAL 还将会通过模型的预训练基础、指令调优数据以及训练方法等多个因素对大语言模型进行评估。研究结果表明,指令数据的质量是衡量模型性能的最关键因素。

研发团队表示,INSTRUCTEVA的目标是帮助加深对指令调整模型及其功能进步的理解。

原创文章,作者:,如若转载,请注明出处:https://knewsmart.com/archives/159498

(0)
上一篇 2022年4月18日 下午10:56
下一篇 2023年6月9日 上午9:57

相关推荐

发表回复

登录后才能评论