产品概述
LMArena AI 原名为 lmsys.org，由加州大学伯克利分校 SkyLab 和 LMSYS 研究团队打造，是一个专注于众包 AI 基准测试的评估平台。用户可以在上面免费与 AI 对话，对两个匿名模型给出相同问题，比较它们的回答并投票，从而帮助收集真实人类偏好数据，生成客观的 Elo 排行榜。平台还扩展了 WebDev Arena 功能，输入需求后两个模型会生成前端页面供你评分，类似 V0 或 Bolt 的体验。
核心优势
首先，盲测模式消除了品牌偏见：每次对战两个模型都是匿名的，你只能根据回答质量打分，保证评估公平性。其次，众包投票系统已累积超过 100 万条用户投票数据，排行榜实时更新，能真实反映当前大模型（如 DeepSeek-R1 等）在通用、编程、数学等领域的实力。此外，平台支持多模态对战，首次提问可上传图像，扩展了交互维度。
适用场景
- AI 开发者：快速比较不同大模型的回答质量，选择最适合自己项目的基座模型。
- 普通用户：免费试用多个匿名 AI 聊天机器人，找到合口味的助手。
- 前端设计师/开发者：在 WebDev Arena 中测试代码生成能力，比较不同模型的设计输出。
- 研究人员：获取众包基准数据，追踪 LLM 性能变化趋势。