2024年中国大语言模型能力评析(一):评测方法论与综合评测结果-AI变革行业创新发展头豹研究院2024-06-27.pdf
![](https://file.sosobaogao.cn/preview/b3369c69327ec50ec94216c3699bf3d1/87e213f721abf27cd2e7a38aea360ba2.jpg)
![](https://file.sosobaogao.cn/preview/b3369c69327ec50ec94216c3699bf3d1/6bfa05552e7dc1d422243376ef5f14aa.jpg)
![](https://file.sosobaogao.cn/preview/b3369c69327ec50ec94216c3699bf3d1/3eb120bccf097eb32617b04c9f21b575.jpg)
![](https://file.sosobaogao.cn/preview/b3369c69327ec50ec94216c3699bf3d1/5b859b76ecd5b33d93041c521d8eeac9.jpg)
![](https://file.sosobaogao.cn/preview/b3369c69327ec50ec94216c3699bf3d1/bbb133c054e978f7eca507c4f29b0cdc.jpg)
![](https://file.sosobaogao.cn/preview/b3369c69327ec50ec94216c3699bf3d1/7face560b5aff3188d68da7ab00f79ea.jpg)
![](https://file.sosobaogao.cn/preview/b3369c69327ec50ec94216c3699bf3d1/6dda070a7a8db87b1af93834387d3f63.jpg)
![](https://file.sosobaogao.cn/preview/b3369c69327ec50ec94216c3699bf3d1/190609e65f24c0abf66cd181d37af75a.jpg)
![](https://file.sosobaogao.cn/preview/b3369c69327ec50ec94216c3699bf3d1/9aad460a26837c569abe6f4560038b4a.jpg)
![](https://file.sosobaogao.cn/preview/b3369c69327ec50ec94216c3699bf3d1/d84424b00f3008b0132826063e762a37.jpg)
摘要:从用户实际使用角度出发,归总出五大一级评测维度,以构建全面科学的评估体系本次大语言模型评测以用户使用体验和实际使用价值为基准,综合考量知识能力、语言能力、道德风险、行业能力及综合能力五大核心一级维度,并进一步细化为风险信息识别、逻辑推理、类比迁移、角色扮演等多个二级维度,以构建全面、科学的评估体系,确保准确衡量模型的优势与不足。2024年大语言模型综合评测显示,国际领先模型在通用基础能力和专业应用能力上略优于中国领先模型,其中文心、GPT3.5和通义千问位居第一梯队根据2024年大语言模型综合评测结果来看,国际领先的模型整体水平略优于中国领先大语言模型的均线。根据国际大语言模型均线、中国大语言模型均线划分出了三个梯队,第一梯队包括文心、GPT3.5以及通义千问;第二梯队包括360智脑、商汤商量、智谱AI、中科闻歌雅意以及腾讯混元;第三梯队包括Minimax、面壁智能、紫东太初、百川智能以及昆仑天工。
免责声明: 1.本站部分作品是由网友自主投稿和发布、编辑整理上传,对此类作品本站仅提供交流平台,不为其版权负责。 2.如发布机构认为违背了您的权益,请与我们联系,我们将对相关资料予以删除。 3.资源付费,仅为我们搜集整理和运营维护费用,感谢您的支持!
合集服务: 单个细分行业的合集获取请联系行研君:hanyanjun830
-
匀气盘行业:应用领域与市场需求,匀气盘在半导体制造中的关键战略角色 头豹词条报告系列 头豹研究院 2024-07-19(19页) 附下载
匀气盘是半导体制造中的关键组件,用于确保晶圆表面膜层的均匀性。行业属技术密集型,对产品质量和环保要求...
5.43 MB共19页中文简体
1天前11820积分
-
中国氢储能行业市场规模测算逻辑模型 头豹词条报告系列 头豹研究院 2024-07-19(15页) 附下载
富强、民主、文明、和谐、自由、平等、公正、法治、爱国、敬业、诚信、友善
1.05 MB共15页中文简体
1天前15520积分
-
新质生产力系列:中国AI健康管理行业概览:以AI科技助力智能健康管理 头豹研究院 2024-07-19(35页) 附下载
AI健康管理目标群体逐步扩大在健康管理方面,利用人工智能技术分析个体健康数据和生活习惯,可制定个性化...
1.66 MB共35页中文简体
1天前96320积分
-
计算机行业:台股算力公司业绩向好,全球AI服务器景气度持续 中国银河 2024-07-19(9页) 附下载
股指动态:美股科技、港股及中概股延续上涨趋势,科技巨头回调,A股计算机持续回调。标普500指数+0....
2.58 MB共9页中文简体
1天前18820积分
-
消费电子系列跟踪:AR赛道和元件板块表现优异,看好端侧AI拉动消费电子整体景气上升 华福证券 2024-07-21(3页) 附下载
投资要点:消费电子指数-0.66%弱于大盘,AR标的和元器件厂商涨幅领先。本周(7月15日-7月19...
979.65 KB共3页中文简体
1天前38720积分
-
电子行业2024年半年度投资展望:拥抱新质生产力,掘金“AI+”新蓝筹 东兴证券 2024-07-19(30页) 附下载
投资摘要:2024年上半年,电子行业指数(中信)相对于沪深300指数和创业板指表现较弱。2024年第...
3.04 MB共30页中文简体
1天前40220积分
-
电子行业专题:存储行业景气度持续上行,深度受益生成式AI产业浪潮 国投证券 2024-07-19(37页) 附下载
存储芯片是半导体的重要品类,2024-2025年市场规模有望快速增长。据WSTS数据,2023年全球...
2.91 MB共37页中文简体
1天前15320积分
-
存储板块跟踪报告(九):周期复苏叠加AI拉动,存储模组行情有望渐行渐盛 开源证券 2024-07-19(28页) 附下载
存储模组厂:锚定广阔细分赛道,国产替代破风前行在存储芯片市场中,原厂一般聚焦手机、PC和服务器领域具...
2.83 MB共28页中文简体
1天前93420积分
-
全球科技行业周报:OpenAI发布新模型GPT-4o mini,关注信创、自动驾驶等新质生产力 华安证券 2024-07-21(20页) 附下载
主要观点:本周行情回顾从指数表现来看,本周(2024-07-15至2024-07-19),上证指数周...
1.06 MB共20页中文简体
1天前29220积分
-
2024年中国半导体设备行业总览:前道设备国产替代正当时(摘要版) 头豹研究院 2024-07-19(28页) 附下载
2023年全球半导体设备市场出现下滑,晶圆制造投资量占比超80%全球半导体设备市场在5G、AI、物联...
2.49 MB共28页中文简体
1天前36920积分
-
传媒行业周报:授权展引领IP商业化新趋势,持续布局AI及IP 开源证券 2024-07-21(15页) 附下载
政策助力,大模型持续提升多模态能力并降本,继续布局AI应用及语料7月20日发布的《中共中央关于进一步...
2.42 MB共15页中文简体
1天前54120积分
-
AI端侧应用系列报告(三):苹果手机的三层成长逻辑 国信证券 2024-07-19(23页) 附下载
摘要三层次模型调用保障用户隐私,实现更强大、更高效且高度优化的AI。AI部署方式:设备端与云端相结合...
2.02 MB共23页中文简体
1天前89320积分
-
计算机行业周报:OpenAI发布GPT-4o mini,引领大模型普及时代 华鑫证券 2024-07-21(12页) 附下载
投资要点AI应用:OpenAI发布GPT-4o mini,引领大模型普及时代7月19日,OpenAI...
619.43 KB共12页中文简体
1天前73920积分
-
电子行业周报:Q2电子板块业绩复苏明显,继续看好AI及需求复苏产业链 国金证券 2024-07-21(9页) 附下载
Q2电子板块业绩复苏明显,继续看好Ai及需求复苏产业链。台积电公布2024年Q2业绩,营收208.2...
1.25 MB共9页中文简体
1天前33120积分
-
澜起科技 澜起科技深度:全球内存接口芯片龙头,新品拓展打开空间、受益AI浪潮 中泰证券 2024-07-21(42页) 附下载
澜起科技(688008)报告摘要Q2扣非净利润、互连收入均创季度新高,三款AI新品起量迅速。1)24...
5.45 MB共42页中文简体
1天前98218积分
-
智微智能 工控+AI+开源鸿蒙三轮驱动,公司成长动力充足 天风证券 2024-07-21(23页) 附下载
智微智能(001339)公司是国内领先的智联网硬件产品及解决方案提供商,商业模式不断迭代。公司的商业...
2.77 MB共23页中文简体
1天前43118积分
-
海光信息 信创、AI双轮驱动,CPU+GPU国产替代领航者 中泰证券 2024-07-19(39页) 附下载
海光信息(688041)报告摘要海光信息:为数字中国提供核心计算引擎。1)海光信息致力于高端处理器领...
2.59 MB共39页中文简体
1天前7418积分
-
被芯:新增需求疲软,替换需求逐渐占据主导地位 头豹词条报告系列 头豹研究院 2024-07-18(21页) 附下载
被芯是由两层织物与中间填充物以适当的方式缝制而成、主要用于保暖的床上用品。被芯产品是居民的生活必需品...
5.93 MB共21页中文简体
4天前39320积分
-
中国现制饮品行业数据库系列报告:中国现制饮品行业2024年第1季度洞察(摘要版) 头豹研究院 2024-07-18(18页) 附下载
观点摘要本篇报告从产品上新、门店新增、品牌营销以及行业融资等维度回顾了2024年第1季度中国现制饮品...
3.41 MB共18页中文简体
4天前36520积分
-
海外AI研究系列(三):美光科技(MU.O)深度报告-存储周期与算力需求共振,AI时代大展宏图 民生证券 2024-07-18(39页) 附下载
存储行业全球巨头,AI时代“存力”核心标的之一。美光创立于1978年,总部位于美国,当前业务包括DR...
3.36 MB共39页中文简体
4天前8720积分