零一万物发布 Yi-Lightning，登上 LMSYS 榜单第六

背景

到 2024 年秋天，大语言模型领域的竞争已十分激烈。美国、中国及其他地区的公司纷纷推出旗舰模型，并请公众在共同的竞技场中进行评判。零一万物在这一背景下推出了 Yi-Lightning^[3]。

在这场竞争中，公开排名具有重要意义，因为它提供了一个共同的参照。LMSYS Chatbot Arena 收集用户的投票：用户在不知道模型身份的情况下，比较两个匿名模型的回答。投票结果被汇总为排名，因此模型的位置反映的是用户的偏好，而不是开发者的说法。

发生了什么

2024 年 10 月，零一万物推出 Yi-Lightning，作为公司的新旗舰模型^[3]。该模型基于增强版的混合专家（Mixture-of-Experts）设计，网络被划分为许多专业化的专家，每个输入只由其中一部分处理^[2]。

李开复称，在 LMSYS 的盲测排名中，Yi-Lightning 位列全球第六，中国模型中第一，并且排在 GPT-4o-2024-05-13 和 Claude 3.5 Sonnet 之前^[1]。这两个模型是排名发布时的竞争对象。

在 Chatbot Arena 的中文、数学、编程和高难度提示（Hard Prompts）类别中，该模型位列第二至第四^[2]。每个类别考察的题型不同，因此模型在各类别中的排名也会有所不同。

关键细节

Yi-Lightning 的 API 价格为每百万词元 0.99 元^[1]。词元是一种小的文本单位，按每百万词元计价，便于开发者估算某项工作的成本。

在 LMSYS 的模型厂商排名中，零一万物与 xAI 并列第三，排在 OpenAI 和谷歌之后^[3]。厂商排名综合考虑公司的全部模型，而非只看单个模型。

影响

这次发布表明，一家中国公司的模型可以进入一个用于比较多国模型的公开竞技场前列。对读者而言，这一事件也说明，基准排名会随时间变化，因为排名反映的是某一时点可用的模型。

这次发布还显示，同一结果可以有多种表述。李开复的说法给出的是全球第六和中国第一，而厂商排名则是零一万物与 xAI 并列第三。三种说法基于同一套竞技场数据，但关注的群体不同，因此最准确的理解需要把它们结合起来看。

对刚接触 AI 的读者来说，这一事件也是了解模型如何被比较的入门案例。基于盲测投票的排名、每百万词元的价格、描述训练方式的技术报告，是三种不同性质的证据，各自从不同角度说明同一个模型。