国内首家,360智脑通过中国信通院可信AIGC大语言模型功能评估

@晓北 出处:二牛网 2023-06-12 22:04

6月12日,360智脑的360GPT-S2-V8型号产品获得了中国信息通信研究院(以下简称“中国信通院”)“可信AIGC大语言模型基础能力”评估报告(以下简称“报告”),报告显示必选项目评估内容均通过。据悉,360智脑是国内首个通过中国信通院该项权威评估的大模型产品。

中国信通院是工信部直属科研事业单位,中国信息通信研究院云计算与大数据研究所(以下简称“中国信通院云大所”)高度重视AIGC技术应用发展态势,为进一步推动相关工作进程,中国信通院云大所现依托“内容科技产业推进方阵”、“元宇宙创新探索方阵”不断推进“可信AIGC系列标准”的制定工作。360智脑此次的评估报告便是以“可信AIGC系列标准”中的“可信AIGC-大语言模型基础能力(功能)评估方法”作为依据。

国内首家,360智脑通过中国信通院可信AIGC大语言模型功能评估

 报告显示,除了5项可选的评估内容,360智脑在所有10部分36项基础能力(功能)评估中全部通过,具备了对应的功能,具体包括生成与创作、多轮对话、代码能力、逻辑与推理、知识问答、阅读理解、文本分类、翻译、文本改写、多模态(文本生成图像)能力等大模型相关的关键领域,能够做到生成与创作、多轮对话并准确理解对话主题、领域和情感等功能,拥有对话推理能力和指代判别能力等等。

这并不是360智脑第一次出现在第三方评测中,此前5月,中文通用大模型基准(SuperCLUE)一项评测结果中,360智脑多项能力位列国产大模型第一;同时期JioNLP大语言模型评测中曾表示,360智脑是“国内大语言模型目前最好的”。

据悉,360智脑是360自研认知智能通用大模型,并已在旗下360搜索、浏览器、办公、智能硬件等场景逐步落地并开放内测,进一步赋能优势场景。公开信息显示,360智脑大模型应用发布会将于2023年6月13日在北京召开。

国内首家,360智脑通过中国信通院可信AIGC大语言模型功能评估