品玩

科技创新者的每日必读

打开APP
关闭

模型大乱斗,小羊驼团队推出大模型竞技平台Chatbot Arena

2023年6月8日

品玩6月8日讯,由伯克利大学主导一个团队 LMSYS Org 近日发布了一个针对大语言模型的基准平台 Chatbot Arena。

据悉,该平台采用匿名、随机的方式进行对抗评测,评测方式基于国际象棋等竞技游戏中广泛使用的 Elo rating system。排名通过用户投票产生,系统每次会随机选择两个不同的大模型机器人和用户聊天,并让用户在匿名的情况下判定哪款大模型产品的表现更好一些。 Elo rating system会根据用户的选择最后判定大模型产品的积分,并以排行榜的形式出现在首页中。

目前OpenAI 的ChatGPT-4排名第一,之后是 Anthropic 的claude,同样来自 Anthropic 的 claude Instant 排名第三。

LMSYS Org 是一个松散的研究组织,由加州大学伯克利分享额学生团队组建,曾推出过大语言模型小羊驼。

取消 发布

下载品玩App,比99.9%的人更先知道关于「大语言模型」的新故事

下载品玩App

比99.9%的人更先知道关于「大语言模型」的新故事

iOS版本 Android版本
立即下载
AI阅读助手
以下有两点提示,请您注意:
1. 请避免输入违反公序良俗、不安全或敏感的内容,模型可能无法回答不合适的问题。
2. 我们致力于提供高质量的大模型问答服务,但无法保证回答的准确性、时效性、全面性或适用性。在使用本服务时,您需要自行判断并承担风险;
感谢您的理解与配合
该功能目前正处于内测阶段,尚未对所有用户开放。如果您想快人一步体验产品的新功能,欢迎点击下面的按钮申请参与内测 申请内测