LMSYS Chatbot Arena:实时和社区驱动的LLM评估 2024-04-30 LMSYS Chatbot Arena是一个开源项目,旨在通过实时、开放和社区驱动的评估来推进LLM的发展和理解。该平台允许用户通过在实际用例中的成对比较来评价LLM,并定期发布排行榜。自2023年5月推出以来,Chatbot Arena已成为一个重要的LLM评估平台,吸引了数百万参与者,收集了超过80万张投票,用于评估90多个LLM。该项目致力于开放科学,分享用户偏好数据和一百万个用户提示,支持研究和模型改进。 (lmsys.org) 42 未分类 程序 政策研究 公共政策 社会政策 评估