世界观察：大模型在工业领域探索仍处于初级阶段
【资料图】
图片来源：中国工业互联网研究院
近日，中国工业互联网研究院（以下简称“工联院”）针对人工智能大模型在中文工业领域的应用性能、技术架构、标准体系进行系统性评测，并发布系列报告。评测对象涵盖GPT-4、GPT-3.5、文心一言、ChatGLM等国内外具有代表性的头部大模型。
本次工业知识问答测试主要分为客观题与主观题两大类，总计超过1100个问题。主观题主要考察四大维度：基础能力、语句能力、概括能力和逻辑能力。评测结果显示，GPT-4表现最佳。国内头部大模型表现亮眼，整体与GPT-3.5相当。其中百度文心一言在国内大模型中排名第一。
在客观题方面，GPT-4与文心一言表现优于其他大模型。但评测结果也同时指出，大模型在准确率方面有较大的提升空间。在主观题方面，国内大模型的基础能力、语句能力与GPT-4接近，概括能力、逻辑能力与GPT-4存在一定差距。
评测数据集由工业领域八大行业的相关数据构成。包括电子设备制造业、装备制造业、钢铁行业、采矿行业、电力行业、石化化工行业、建材行业和纺织行业。工联院根据工业经验，结合外部数据源，按行业构建行业知识测试集。
从行业维度看，大模型在八个行业知识问答能力上差异明显，个别行业需进一步优化提升。其中，电子、装备行业评价指数较高，纺织、采矿行业综合评价指数相对较低。
分析大模型落地垂直行业痛点，丰富特定行业专业知识。虽然国内大模型在本次评测中表现较好，甚至在部分行业评分优于GPT-3.5，但工联院评测报告指出，国内外通用大模型在工业知识问答领域探索仍处于初级阶段，国内大模型与GPT-4有差距，行业间的泛化能力有待加强。对此，工联院评测报告给出的建议是进一步丰富相关专业领域的数据训练集，进行专业化的微调。
标签：
相关阅读
精彩推荐
阅读排行
相关词
- 环球微动态丨博思软件（300525）：7月5日北向资金减持43.99万股
- 时讯：送走“最强外援”，这个沿海弱省慌不慌？
- 【环球新要闻】驻香港部队组织“七一”军营开放活动
- 像素火柴人好玩吗 像素火柴人玩法简介_焦点速读
- 《海南省养老服务条例》施行
- 国产扬眉吐气！pubg转免凉凉，它却是乘胜追击？ 全球新动态
- 你画圈我画叉好玩吗 你画圈我画叉玩法简介 焦点消息
- 百度文库登录个人中心开学培训心得体会（百度文库登录个人中心）|世界观察
- 忘却前夜什么时候出 公测上线时间预告 环球讯息
- 亡灵杀手夏侯惇官网在哪下载 最新官方下载安装地址_天天微资讯
- 腾讯突然宣布：下线！|焦点简讯
- 万州，夜幕下的坚守|每日播报
- 超能世界神圣号角神器评测
- 全球速递！热闹！好看！刺激！儋州“村VA”今晚赛果公布！戳看明晚赛程
- 7月6日直播预告《绿茵信仰》抖音直播小罗专场来袭 人气商品等您来购!
- 为家门口的好医护点赞！他们给大石街社区医生送来了两面锦旗～
- 高举“模范”旗帜，新造镇精神文明建设展现榜样力量
- 报道：《崩坏星穹铁道》饮月之乱到底是什么讲了什么 饮月之乱剧情解析
- 前半年月均销量超12万，捷途星途同比大增，奇瑞今年铁定大卖 全球热头条
- dnf燃武套有永久的吗 燃武套永久详情
- 《梦幻西游》5开不建议刷的神器是什么 5开不建议刷的神器介绍
- 【当前独家】dnf燃武套怎么获得 燃武套获取攻略
- 辽宁阜新公布一起致7死7伤的瞒报煤矿事故
- 鄂尔多斯市副市长：正在以前所未有的力度推进科技创新|全球实时
- 每日时讯!华电国际：公司超超临界机组装机容量占煤机装机总量约40%
- 你知道张雪峰用的是什么手机吗？
- 每日热讯!一根香蕉热量多少大卡_一根香蕉的热量是多少
- 时讯：多米诺效应动画（多米诺效应）
- 中化化肥（00297.HK）：7月5日南向资金增持18.4万股
- 液化气相关上市公司有哪些？（2023/7/5）
- 当前速讯：被囚禁的内心
- 绿景中国地产（00095.HK）：7月5日南向资金增持18万股_环球热讯
- 金蝶国际（00268.HK）：7月5日南向资金增持394.7万股_当前时讯
- 环球新资讯：果然视频｜李玟：想你的365天
- 2021年高端电脑（2021最顶级的高端电脑） 每日热议
- 孙杨身高对比（孙杨身高）
- 星期五的英语单词 星期一至星期五的英语单词介绍
- 关爱老人标语八字（关爱老人标语）
- 中国最好吃的美食饭（最喜欢吃的中国美食
- 天天快讯:红米桌面布局设置方法
- 每日信息：总台与国际皮划艇联合会签约合作 首届国际皮划艇超级杯明年举办
- 世界观速讯丨启明医疗-B（02500.HK）：7月5日南向资金增持4.7万股
- 小蚁摄像机怎么连接wifi|快资讯
- 剥鹌鹑蛋怎么做才不会破，有好方法么? 环球速递
- 官方：国米与巴斯托尼续约至2028年
- 迈阿密媒体人：热火现在对沙梅特很感兴趣
- 环球微资讯！第十三届台湾学生天府夏令营开营
- 全球短讯！恩施民俗文化详细介绍（湖北省恩施州民俗文化）
- 党小组人数一般多少人合适（党小组人数） 天天讯息
- 朝阳区将台地区将府家园社区管城理市志愿服务队(对于朝阳区将台地区将府家园社区管城理市志愿服务队简单介绍) 当前热文
- 美国国庆民调：年轻人情绪悲观，“美国梦”在消逝
- 奔驰发布了一台诺基亚 当前关注
- 观察：无证上岗罚！厦门一批特种作业典型违规案例曝光
- 三亚崖州湾科技城融媒体中心揭牌成立 环球速看
- 环球热点评！疯狂小蛋糕官网在哪下载 最新官方下载安装地址
- 天天动态:核电工匠！杨军华获选第三届“感动昌江”十大人物
- 全球微动态丨像素火柴人官网在哪下载 最新官方下载安装地址
- 环球看点！《王者荣耀》米莱狄完美假期皮肤上线时间
- 全球快播：原神3.8疾速观览任务完成攻略
- 全球热文：元武什么时候出 公测上线时间预告
- 河北省市场监督管理局关于消防器材等产品质量监督抽查结果的通告 全球快讯
- 当心！酒吧里出现特殊“电子烟”，价格畸高吸食上瘾
- 全球最新：数字藏品平台iBox抽奖送玛莎拉蒂被罚！原因是碰了“红线”……
- 关于消费者反映“友谊路下岗职工海鲜加工广场短斤缺两”问题调查处理情况的通报-每日快播
- 全球短讯！《方舟2》公布多张概念图,生物装备、建筑、钓鱼玩法首曝
- 喜讯！这所高校和陵水签约合作办学
- “狂闪”“尊客”“优耳”等6款手机充电器未达标！ 环球焦点
- 世界实时：《女神异闻录5:战略版》全新角色“艾露”介绍宣传片
- 【环球新视野】北京惠民文化消费季举办艺术节
- 卡仕达酱可以做什么(卡仕达酱是什么东西) 每日讯息
- 热推荐：常州武进：“田间”微党课聚人气，让“红色能量”从“田间”到“心间”
- 天天新动态：万孚生物拟以不超五千万元回购股份 最高回购价43.06元/股
- 宝钢股份：要解决钢铁行业面临的痛点问题主要还需从实业层面着手
- 筑牢应急屏障 江苏淮安打好防汛“准备仗” 焦点短讯
- 江苏启东：江风海韵如画来，长江入海口“绘就”生态美 前沿热点
- 丰田宣布固态电池技术获重大突破 “固液之争”远未到终局
- 环球消息！荣耀发布X50新机，搭载一亿像素主摄，售价1399元起
- 宿迁沭阳：抓好文化惠民工作 “点亮”群众多彩生活|每日快讯
- 8月1日起出口管制 镓锗概念股连涨：产业链将受哪些影响？
- 当前视讯！南京奋力在科技自立自强上走在前：抓牢创新“牛鼻子”，当好创新“排头兵”
- 长春机场用心用情用力 做好暑运“答卷人”
- 每日头条!西北地区各机场抢抓暑运机遇促市场发展
- 当前视讯！“汽车自燃！电梯困人！”东航综管部开展突发应急演练
- 王者吃鸡战场什么时候出 公测上线时间预告
- 焦点关注：租车必看！海南 “小微型租赁车查询”小程序上线
- 动态焦点:工业节能降碳范围扩大 新增11个领域
- 全球动态:早安心语正能量一句话
- 14小时搞定赖斯+廷贝尔，枪迷们现在感觉如何？_世界实时
- 原神琉璃秘境小中见大任务解谜指南
- 柳州城管凌晨收到一条感谢短信，原来是做了这件事
- 舍己救人！这个“见义勇为积极群体”获选第三届“感动昌江”十大人物
- 美食塔塔什么时候出 公测上线时间预告 世界速看
- 郑州机场举办“让服务更有温度”主题演讲比赛_天天滚动
- 居然之家现4547.84万元折价大宗交易 折价率9.28%_世界快播报
- 世界观热点：首都航空计划8月27日恢复杭州—马德里航线运营
- 快播：2023年第二十二届“环湖赛”海南赛段安全保卫工作领导小组召开动员部署会议
- 市场监管总局和浙江省政府签署合作协议?共同促进平台经济高质量发展|天天热闻
- 【环球报资讯】火柴人领地之战好玩吗 火柴人领地之战玩法简介
- 全球即时看！海南科技职业大学一学生离世 鉴定结果为系自身疾病导致死亡
- 终极狐狸模拟器2什么时候出 公测上线时间预告
- 世界新消息丨银河退: 关于公司股票终止上市暨摘牌公告
- 泰山科技学院与中国山东网（泰安）签订新闻采写基地建设协议
- 香港金管局总裁余伟文：“北向通”约40%交易集中在五年或以上期限债券，将丰富“北向通”风险管理工具箱 焦点短讯
- 环球观天下！iphone官网（进入iphone官网查序列号）
- 杨德龙：新能源汽车发展中国优势明显，看好新能源板块长期走势
- 【地评线】新华时论｜以“身心在场”向文化致敬 头条焦点
- 每日简讯：一图了然 ｜ 面对“烤”验，这些物品也要防暑降温
- 【地评线】荔枝网评：风雨中的毕业致辞，为何打动人心？ 新视野
- 周延礼：我国应加快建立数据产权制度、数据要素流通和交易制度等
- 美团携手平安上线美团生意保商家综合险
- 天天微动态丨漫评：集火成炬，照亮奋进的中国
- 没宽带的房子，怎么做远程监控和安防？_全球今热点
- 【环球新要闻】牧原股份：今年上半年，公司共销售生猪3026.5万头
- 打通科技成果转化“最后一公里” 江苏连出妙招促技术“联姻”
- 福建三明：推动闽台高等教育融合发展
- 海南热带雨林国家公园资源综合调查与监测项目正式启动 世界速看料
- 天津货运航空开通大兴—无锡—芜宣—大兴货运航线
- 环球即时：范文仲：数据演进为生产性数字资本将为中国经济增长提供资本来源
- 历城区委书记张军视察夏粮收购工作
- 【财智头条】小米、华为“掐架”，月底法庭见！
- 医者仁心！郑伟民当选第三届“感动昌江”十大人物 头条
- 100%自主可控 北斗系统成体系突破百余项关键技术 世界头条
- 5日夜间重庆东北部部分地区地质灾害气象风险等级高
- 当翱翔风于烈日什么时候出 公测上线时间预告 世界快资讯
- 创意咖啡店物语好玩吗 创意咖啡店物语玩法简介-世界今头条
- 烟雨江湖翠竹在哪里采集
- 【财智头条】“牵手门”男子仍为高管？官方回应了！处理结果近期公布
- 西北民航上半年航班正常“两率”均超过90%
- 全球视讯！至善家风！符桂英获选第三届“感动昌江”十大人物
- 恐怖冰淇淋香蕉怪人好玩吗 恐怖冰淇淋香蕉怪人玩法简介
- 劲客2022款报价及图片（劲客的通病是什么？）_环球报道
- 《阴阳师》夜溟彼岸花怀珀诉愿皮肤获取方法
- 竭诚为民！施扬成获选第三届“感动昌江”十大人物
- 【有艺境·艺外】她的画令人神魂颠倒，大胆暗示其荒谬
- 书画 | 室有清风——张剑工作室师生画展开幕|当前信息
- 【天天报资讯】考古学家在墨西哥发现新的玛雅遗迹
- 男生和女生擦鸡 天天观焦点
- 西藏：数字经济加速融入国家“东数西算”格局 全球速讯
- 平安人寿甘肃分公司开展“7.8全国保险公众宣传日”系列活动
- 环球聚焦：猪价年内跌幅已超20% 业界预计三季度末前后有望企稳回升
- 全球滚动:廷伯上赛季399次将球传入进攻三区，欧洲七大联赛中卫之最
- 全球今日报丨俄媒：中国新的对外关系法意味着什么？
- 第十六届省运会射箭比赛开赛|每日讯息
- “开放麒麟1.0”发布！我国首个开源桌面操作系统来了
- 各地加强灾害风险预报预警 推进防灾减灾稳产增产措施落实到户到田
- 中国专家表示新疆根本不存在所谓的“强迫劳动”
- 奇安信集团董事长齐向东：数智时代，“零事故”标准将是必然-天天快资讯
- 中国专家表示新疆女性不断突破重重束缚实现个人解放与现代化发展_全球看点
- 2023年共下达大学生创新创业教育项目预算1亿元|全球即时
- 优机股份：航空零部件智能制造基地建设工作已完成，目前已办理完工程竣工备案-世界报资讯
