工联院大模型测评:文心一言在工业领域表现超过GPT3.5
admin
2023-06-29 04:00:09
0

原标题:工联院大模型测评:文心一言在工业领域表现超过GPT3.5

北京商报讯(记者 魏蔚)6月28日,北京商报记者获悉,中国工业互联网研究院(以下简称“工联院”)针对人工智能大模型在中文工业领域的知识问答能力进行系统性评测结果显示,百度文心一言表现超过GPT3.5,综合评价指数在国内排名第一。工联院本次评测选取了工业领域典型的八大行业。百度文心一言在电子设备、装备、钢铁、采矿、电力、石化、建材七个行业均获国内第一。

本次工业知识问答测试主要分为客观题与主观题两大类,总计超过1100个问题。主观题主要考察四大维度:基础能力、语句能力、概括能力和逻辑能力。评测结果显示,GPT4表现最佳。国内头部大模型表现亮眼,整体与GPT3.5相当。其中百度文心一言表现超过GPT3.5,在国内大模型中排名第一。在客观题环节,评测结果显示,GPT4与文心一言表现好于其他大模型。但评测结果也同时指出,大模型普遍准确率有较大的提升空间。主观题方面,国内大模型的基础能力、语句能力与GPT4接近,概括能力、逻辑能力与GPT4有一定差距。在大模型的自我认知能力和污染问题分析能力上,GPT4相较于其他大模型表现出更好的能力。

相关内容

热门资讯

国网淇县供电公司:筑牢电网安全... 大象新闻记者 张晚璐 通讯员 高点 为积极应对冬季用电负荷高峰与恶劣天气挑战,确保电网安全稳定运行,...
今日重大发现“青松游戏可以开挂... 今日重大发现“青松游戏可以开挂吗?”(透视曝光猫腻)您好,青松游戏这个游戏其实有挂的,确实是有挂的,...
终于懂了“畅游贵州麻将怎么装挂... 家人们!今天小编来为大家解答畅游贵州麻将透视挂怎么安装这个问题咨询软件客服徽9784099的挂在哪里...
重磅消息“新九方炸/金/花可以... 您好:新九方炸/金/花这款游戏可以开挂,确实是有挂的,需要了解加客服微信【9784099】很多玩家在...
最新引进“齐聚天下有没有挂?”... 网上科普关于“齐聚天下有没有挂”话题很是火热,小编也是针对齐聚天下作*弊开挂的方法以及开挂对应的知识...
今日重大发现“麦穗二八杠到底是... 您好:麦穗二八杠这款游戏可以开挂,确实是有挂的,需要了解加客服微信【9752949】很多玩家在这款游...
终于懂了“新八戒是不是有挂?”... 网上科普关于“新八戒有没有挂”话题很是火热,小编也是针对新八戒作*弊开挂的方法以及开挂对应的知识点,...
玩家攻略科普“新广西老友麻将有... 家人们!今天小编来为大家解答新广西老友麻将透视挂怎么安装这个问题咨询软件客服徽4282891的挂在哪...
【第一资讯】“上海滩究竟有挂吗... 【第一资讯】“上海滩究竟有挂吗?”(透视曝光猫腻)您好,上海滩这个游戏其实有挂的,确实是有挂的,需要...
玩家分享攻略“科尔沁麻将有挂吗... 网上科普关于“科尔沁麻将有没有挂”话题很是火热,小编也是针对科尔沁麻将作*弊开挂的方法以及开挂对应的...