通信人家园

 找回密码
 注册

只需一步,快速开始

短信验证,便捷登录

搜索

军衔等级:

  大校

注册:2015-1-2854
发表于 2024-4-23 12:39:37 |显示全部楼层
【ITBEAR科技资讯】4月23日消息,清华大学基础模型研究中心最近公布了2024年3月版的《SuperBench大模型综合能力评测报告》,该报告全面评估了14个在海内外具有影响力的模型。

在这份报告中,文心4.0的卓越表现引起了广泛关注。其整体性能已经接近了国际顶级模型,且正逐步缩小与全球领先模型的差距,显然已经成为了国内领先的模型。




在人类对齐能力的评测中,文心4.0展现了出色的实力,毫无争议地位居国内首位。同时,在中文推理和中文语言能力的评测中,文心4.0也是一骑绝尘,与其他模型相比,其优势十分明显。特别在中文理解的评测环节,文心4.0的得分比第二名的GLM-4高出了0.41分,显示了其在中文处理上的深厚功底。

此外,在语义理解的数学能力评测中,文心4.0与Claude-3模型并列全球首位,而知名的的GPT-4系列模型则紧随其后,位列第四和第五。其他模型的得分大多集中在55分左右,与领先群体存在显著的差距。




在阅读理解能力的评测中,文心4.0同样大放异彩。它不仅超越了GPT-4 Turbo和Claude-3,还超越了GLM-4,斩获了最高分。

据ITBEAR科技资讯了解,在企业最为关注的安全性评测中,文心4.0也展现出了卓越的性能。它以89.1分的高分超越了国际一流的GPT-4系列模型和Claude-3,位列第一,而Claude-3在这次评测中仅排在第四位。

报告还提到,自去年3月16日文心一言首次公开亮相以来,其在短短的时间内就实现了用户数量的突破,目前已经超过了2亿用户。同时,每天的API调用量也异常活跃,已经超过了2亿次。

举报本楼

本帖有 2 个回帖,您需要登录后才能浏览 登录 | 注册
您需要登录后才可以回帖 登录 | 注册 |

手机版|C114 ( 沪ICP备12002291号-1 )|联系我们 |网站地图  

GMT+8, 2024-5-25 10:54 , Processed in 0.106748 second(s), 16 queries , Gzip On.

Copyright © 1999-2023 C114 All Rights Reserved

Discuz Licensed

回顶部