Jurassic-1

是什么

Jurassic-1 是 AI21 Labs 推出的第一个大语言模型系列。大语言模型是用大量文本训练出来的程序，能够预测并生成语言，开发者可以用它来写作、摘要、回答问题等。AI21 于2021年8月与开发者平台 AI21 Studio 一同发布 Jurassic-1，公告日期为2021年8月4日^[1][2]。

由来

该系列通过 AI21 Studio 面向开发者提供。2023年3月，Jurassic-2 发布并成为 Jurassic-1 的后继模型^[3]。

主要特点

最大的 Jurassic-1 Jumbo 拥有 1780 亿参数，参数是模型用来存储所学知识的可调数值^[1]。AI21 称它是当时面向开发者通用使用的、规模最大、最为复杂的语言模型^[1]。

该模型使用约 25 万个词元（token）的词表。词元是文本的基本单位，可以是一个词、一个词的一部分或一个标点。AI21 表示，这一词表至少是多数现有词表的5倍大。词表中还包含多词词元，如短语和命名实体，使常见表达能被当作一个整体处理^[1]。

AI21 通过 AI21 Studio 以公开测试版的形式提供这些模型，任何人都可以注册使用。开发者可以通过接口（API）或交互式网页环境来使用它们^[1]。Jurassic-1 是闭源模型，只能通过 AI21 的 API 调用^[1]。闭源模型不公开权重，外部用户只能通过服务方的接口使用，无法自行运行。

在发展中的位置

2023年3月，随着 Jurassic-2 发布，Jurassic-1 的定价改为按文本总长度计费的优惠方案^[3]。这一调价与 Jurassic-2 的推出同时发生。