Arena Intelligence

是什么

Arena Intelligence Inc. 是 Chatbot Arena 背后的团队在 2025 年成立的公司，投资方包括 Andreessen Horowitz（a16z）与加州大学。^[1] 公司自述由加州大学伯克利分校的研究人员创立，早期使用的名字是 LMArena，目标是了解 AI 在真实世界中的表现。^[1] 它表示自己拥有 2.5 亿美元的风险投资。^[1]

这家公司不是从某个产品长出来的，而是从一个公开的模型对比网站长出来的。要理解它，得先理解那个网站。

由来：一个公开的竞技场

Chatbot Arena 由 LMSYS Org 于 2023 年 5 月 3 日发布，形式是匿名、随机的两两对战，外加一个 Elo 排行榜。^[3] 访问者输入一个问题，会拿到两个不署名模型的回答，然后挑出更好的那一个；这些投票被换算成评分。这里用到的 Elo 原本是国际象棋等对抗性项目里的打分方法：赢了更强的对手就加分，输给更弱的对手就减分，所以它表达的是相对水平，而不是一个绝对分数。因为对局随机抽取、模型名字被藏起来，最后得到的排序反映的是用户在不知道答案出自谁手时的实际偏好。

第一版排行榜使用的是 2023 年 4 月 24 日至 5 月 1 日之间收集的投票，vicuna-13b 以 1169 的 Elo 评分排在第一位。^[3]

2025 年的重启与融资

2025 年 5 月 21 日，团队宣布完成 1 亿美元种子轮融资，并以 LMArena 的名字重新发布平台。^[2] 这一轮由 a16z 与 UC Investments 领投，Lightspeed、Laude Ventures、Felicis、Kleiner Perkins 和 The House Fund 参与。^[2] 在重启之前，这个平台一直叫 Chatbot Arena。^[1]

公司自己给出的融资口径更大：它称共获得 2.5 亿美元风险投资，领投方是 Felicis 和 UC Investments，Andreessen Horowitz、The House Fund、LDVP、Kleiner Perkins、Lightspeed 与 Laude Ventures 参与。^[1] 它的介绍页还引用了一条路透社的标题，称公司在最新一轮融资中估值翻了三倍，达到 17 亿美元。^[1] 这两个数字说的是不同的事——一笔种子轮和累计融资额——公司把它们分开放着。

这种方法的意义与边界

用固定题目集做的基准有一个众所周知的弱点：题目一旦公开，模型就可以朝这些题目去调，高分便不再能区分真正更强的系统和只是见过题的系统。竞技场式的做法绕开了这一点：题目来自用户，而且从不告诉投票者哪个回答出自哪个模型，于是比较用的提示词始终在更新，没人能提前写进训练数据里。

不过，这样的排行榜衡量的是偏好，不是正确性。投票的是恰好访问网站的那批人，他们既看准确性，也看行文风格、长度和排版，所以据此得到的排序最好当作多种信号中的一种，而不是判决书。Elo 分数本身也只是对过去两两胜负的汇总，不是模型的固有属性。

在发展中的位置

Arena Intelligence 标志着一个研究性排行榜变成一个公司的时刻：它有了自己的法定名称、投资人和估值。从 2023 年发布到 2025 年重启，中间不过两年，规模却完全不同——最初只是一个研究团队运行的投票界面，如今是一家以衡量 AI 系统在实验室之外的表现自述使命的公司，连它自己的融资额与估值都写在了介绍页上。^[1][3]