快手自研模型“快意”成中文能力top1 61分成绩超ChatGPT

来源: 中关村在线2023-08-22 11:41:16
  


(资料图片)

近期,快手自研的大型人工智能模型“快意”(KuaiYii)在AI综合中文评估基准CMMLU的榜单中崭露头角。据悉,该模型的13B版本KwaiYii-13B在five-shot和zero-shot项目下的中文向均位列第一名,尤其在人文学科、中国特定主题等方面表现突出,平均分超过61分。根据快手在GitHub页面公布的信息,快意是其AI团队独立研发的大规模语言模型。目前,该模型已经覆盖了预训练模型(KwaiYii-Base)和对话模型(KwaiYii-Chat)。快意的主要特点包括:首先,KwaiYii-13B-Base预训练模型具备优异的通用技术底座能力,在大部分权威的中/英文Benchmark上取得了同等模型尺寸下的最佳效果。例如,该模型在MMLU、CMMLU、C-Eval、HumanEval等Benchmark上目前处于同等模型规模的领先水平。其次,KwaiYii-13B-Chat对话模型具备出色的语言理解和生成能力,支持内容创作、信息咨询、数学逻辑、代码编写、多轮对话等广泛任务。人工评估结果显示,KwaiYii-13B-Chat超过了主流的开源模型,并在内容创作、信息咨询和数学解题上接近ChatGPT(3.5)同等水平。

关键词:

责任编辑:sdnew003

相关新闻

版权与免责声明:

1 本网注明“来源:×××”(非商业周刊网)的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责,本网不承担此类稿件侵权行为的连带责任。

2 在本网的新闻页面或BBS上进行跟帖或发表言论者,文责自负。

3 相关信息并未经过本网站证实,不对您构成任何投资建议,据此操作,风险自担。

4 如涉及作品内容、版权等其它问题,请在30日内同本网联系。