🔍
C

Chatbot Arena

AI模型评测

Chatbot Arena是LMSYS推出的众包评测平台,让用户匿名对两个大模型的回答进行投票PK,通过Elo评分算法生成真实用户视角的模型排行榜,被誉为"大模型评测的奥林匹克"。

ChatbotArena模型评测LMSYS推出的众包评测平台匿名对战众包投票Elo评分真实用户视角多模型覆盖

产品介绍

Chatbot Arena是LMSYS推出的众包评测平台,让用户匿名对两个大模型的回答进行投票PK,通过Elo评分算法生成真实用户视角的模型排行榜,被誉为"大模型评测…

面向模型评测工具场景,Chatbot Arena 把"通过Elo评分算法生成真实用户视角…"这类环节打包到一起,省去在多款工具之间来回切换。

核心功能

匿名对战:让两个大模型匿名回答同一问题,用户盲选更好的答案。

众包投票:依靠大量真实用户的投票积累评测数据。

Elo评分:采用Elo算法生成动态排行榜。

真实用户视角:反映真实使用体验,而非固定考题分数。

多模型覆盖:涵盖主流开源和闭源大模型。

官网地址chat.lmsys.org