清华发布大模型性能报告:GPT-4第一 更懂中文的还是百度

2023-08-10 19:25:14 来源:网络

快科技8月10日消息,AI大模型成为今年的热点,OpenAI的ChatGPT一马当先,微软、谷歌、Meta紧随其后,国内科技巨头也迅速跟进,现在国内据说已经有上百款大模型问世了。

这么多大模型中,实力到底如何?日前清华大学新闻与传播学院发布了《大语言模型综合性能评估报告》,将国内外的大模型做了一番对比。

清华发布大模型性能报告:GPT-4第一 更懂中文的还是百度

该报告还探讨了这些模型在不同知识领域,如创意写作、代码编程、舆情分析、历史知识等方面的回答情况,以及其在解决实际问题中的有效性和局限性。

从生成质量、使用与性能、安全与合规三个维度,对目前市场上的7个大型语言模型进行了全面的综合评估。

清华发布大模型性能报告:GPT-4第一 更懂中文的还是百度

在这7款大模型中,GPT-4获得了毫无悬念的第一,第二名是百度的文心一言,其次是GPT-3.5,后面就是Claude、讯飞星火、阿里云的通义千问及昆仑的天工。

虽然GPT-4各方面领先,但是对国内用户来说,更懂中文的大模型才是关键,这方面百度的文心一言更好,在部分中文语义理解方面,文心一言以92%的得分率排名榜首,超越讯飞星火、GPT-4。

这跟百度的大模型包含大量中文文本有关系,因此能够更好地处理本土文化相关的内容。

,清华发布大模型性能报告完颜宗弼 :GPT-4第一 更懂中文的还是百度

相关:

肌霸猪到底会让多少人羞愧?黑皮,翘臀,肌霸。你很难想象这样的是猪。要说猪能练成施瓦辛格,不如说鱼会破鳞成蝶。看到这场面,我意识到自己想象力的局限以及大自然的漫无边界。挖掘潜能,拓宽边界的行事做派很好,当今社会正需要这样的复合型人才。但凡事得有个度,太过了搞得不伦不类邯郸学步,何苦呢。本来吃吃睡睡等死,却长一身的腱子肉,看客是嫉妒了,自己却搞得很累。硬邦邦的,毫无用武之地,站着躺着都不舒服,要这肌肉有毛用。肌霸猪就是这样一..

河北涿州211个进水村已全部退水  8月9日,河北省涿州市通报抗洪抢险有关情况。经初步统计,涿州全市47万余人受灾,农作物受灾面积28621公顷。截至目前,全市402个村,191个村未受灾,211个村进水,已全部退水。   涿州境内主要有永定河、白沟河、北拒马河、小清河、琉璃河、胡良河6条行洪河道,145个傍河村,2个蓄滞洪区。今年以来,涿州全市累计降雨量524.7毫米。7月29日8时至8月2日8时,过程平均雨量358.7毫米,较常年相比增多4.4倍,最大累计降雨量442..

绘就中华文明传承发展的“长城画卷”  绘就中华文明传承发展的“长城画卷”   ——北京长城文化带保护传承利用调研与思考   编者按   万里长城气魄雄伟,是世界上最伟大的工程之一。长城不仅是中华民族精神的象征,也是传承和弘扬中华文化的重要载体。2019年8月,习近平总书记强调:要做好长城文化价值发掘和文物遗产传承保护工作,弘扬民族精神,为实现中华民族伟大复兴的中国梦凝聚起磅礴力量。为守护好这一宝贵文化遗产,近年来,北京以长城文化带保..

吉林:抢险救灾和灾后恢复工作同步有序开展  “注意放线的高度,别缠在一起,线夹要固定好……”8月8日早上7点20分,在吉林省敦化市额穆镇十里堡村,国网敦化供电公司额穆供电所员工邹义文和同事们正忙着抢修线路。   抢修队员们一大早就集合赶路,在道路被洪水冲断的地方下车,手拿肩扛设备绕行山路。邹义文表情坚定地说:“水退到哪里,电就送到哪里;受灾群众安置到哪里,光明就要照亮哪里!”   这是吉林省全力抗洪救灾抢险中温暖的剪影。连日来,受台风“杜..

洪灾袭来险情急 科技撑起“保护伞”  ◎本报记者 都 芃   受季风、台风等因素影响,每年的7月下旬和8月上旬,民间俗称“七下八上”,是我国东部地区降水最为集中的时期,也是我国抗洪防汛的关键时间。今年进入7月下旬后,受台风影响,我国东部地区普遍遭遇强降水天气。   城市作为建筑物密集、人员高度集中的区域,在遭遇强降雨时往往存在内涝风险。为了尽可能降低城市内涝带来的不利影响,最大限度保障人民生命和财产安全,近年来各类科技手段被广泛应..

每小时制水5吨 “移动水厂”确保涿州饮用水高质高量  现场检测145项指标,每小时制水5吨   “移动水厂”确保饮用水高质高量   ◎本报记者 陈汝健   “应急送水车来啦,快排好队,准备接水。”上述情景,是记者8月9日下午在河北省涿州市冠云西路上的华北铝业南院生活小区门口所见的一幕。   “自8月2日起,我们先后从国家供水应急救援中心西北基地和东北基地调配了8辆应急制水车。”在位于涿州市的华北铝业有限公司厂区制水点,中国城市规划设计研究院水务院工程师..

深海采矿:转型希望还是环境黑手  ◎本报记者 刘 霞   作为负责管理国际海底区域及其资源的权威组织,联合国国际海底管理局(ISA)稍早时间在牙买加金斯敦举行会议,讨论是否为深海采矿制定行业规则,从而给这一新兴行业正式“开绿灯”。   此前,围绕是否允许深海采矿,各方一直争论不休。矿业公司认为,深海中富含镍、钴、锰等对全球能源转型中的绿色技术至关重要的矿物,且深海采矿比陆地采矿成本更低,对环境的影响更小。但环保人士表示,科学家们..

本轮强降雨已致黑龙江超37万人受灾新华社哈尔滨8月9日电 记者9日从黑龙江省应急管理、农业农村等部门获悉,本轮强降雨以来,黑龙江省各地受灾人口超过37万人。自8月2日以来,黑龙江省哈尔滨、牡丹江、齐齐哈尔、伊春、鸡西、佳木斯等地的37个县(市、区)遭受风雹和洪涝灾害。据初步统计,截至9日12时,黑龙江省受灾人口374049人,紧急转移安置人口187493人,其中,集中安置人员23745人、采取投亲靠友方式分散安置人员163748人,农作物受灾面积387.08万亩,倒损..

重庆丰都通报网传一寺庙疑似供奉“日本邪神”  中新网重庆8月9日电 (记者 贾楠)9日,重庆市丰都县民族宗教事务委员会通过“丰都统战”微信公众号发布消息称:2023年8月5日,网传丰都县三合街道“庙嘴小庙”供奉疑似“日本邪神”相关视频。针对该视频信息,丰都县高度重视,立即组建联合调查组进行深入调查。   经核查,此视频中黑色塑像为普通工艺摆件,系因丰都县三合街道一位老年居民误认为是“菩萨”,于今年7月下旬摆放到丰都县龙河湿地公园岸边观音菩萨民间信..

孤注一掷是有效的宣传片,无效的电影今晚写最近的爆款新片——《孤注一掷》因为这片子的一些题材特殊性,我们不得不在批评这部电影之前,先回答一个这几天在微博铺天盖地出现,我们的评论区也可能会有的问题:“这部片让更多人警惕网络诈骗,这不是已经很好了吗?”是的,没有什么不好,这当然是一件非常好的事情,但“让观众不上当受骗”不在电影的评价标准里,这是宣传片的标准。当然,你可以说,我就是拿它宣传片,去受教育的,那你的这个评价确实成立,我也认同..