- 许可
- Apache-2.0
- 访问方式
- 下载
- 发布日期
- 开发方
- Meta AI
是什么
分割(segmentation)指判断图像中的每个像素属于哪个物体,并生成一张描出物体轮廓的掩码(mask)。Segment Anything 模型(SAM)是一种可提示(promptable)的分割模型:用户用点或框指出想要的对象,模型就返回该对象的掩码。Meta AI 于 2023 年 4 月 5 日发布了它,并将其定位为图像分割基础模型(foundation model)的一步,即一个能服务于多种分割任务的通用模型。[1]
由来
论文《Segment Anything》发布在 arXiv 上,编号为 arXiv:2304.02643。[2] Meta 在发布模型的同时还发布了 SA-1B 数据集,它的掩码是由一个三阶段的数据引擎(data engine)标注出来的。这个引擎依次经历了模型辅助标注、半自动标注和全自动标注三个阶段。[1]
主要特点
提示方式。 提示可以是前景或背景的点、粗略的框、掩码,或其他信息。对于有歧义的提示,模型会返回其中一个可能对象的有效掩码。[1]
一个模型两种用法。 同一个模型既能用于交互式分割,即由人引导它;也能对图像中的所有物体做全自动分割。[1]
零样本迁移。 模型无需额外训练即可迁移到新领域。Meta 举的例子包括水下照片和细胞显微图像。[1] 这里的零样本,指模型用在它没有专门训练过的图像类型上。
结构。 图像编码器对每张图像只计算一次图像嵌入(embedding)。轻量的提示编码器把任意提示转换为模型可用的形式,轻量的解码器则预测掩码。[1] 由于较重的编码器每张图只运行一次,之后每个新提示的处理都很省算力。
速度。 图像嵌入算好之后,对任意提示生成掩码大约需要 50 毫秒,并且可以在网页浏览器中运行。[1]
SA-1B 数据集。 SA-1B 包含超过 11 亿个掩码,来自约 1100 万张有授权、保护隐私的图像。Meta 称,它的掩码数量是现有分割数据集的 400 倍,并且发布时用于研究目的。[1]
标注效率。 辅助标注每个掩码大约需要 14 秒,Meta 称这比 COCO 的多边形标注快 6.5 倍。[1]
许可与访问。 模型采用宽松的 Apache 2.0 许可证发布,代码在 GitHub 上,演示位于 segment-anything.com。[1]
在发展中的位置
Meta 在 2023 年 9 月宣布,将 Segment Anything 用于 Instagram 的图像编辑功能 Backdrop。[3] 2024 年 7 月发布的 SAM 2 把这一方法扩展到视频,并加入了跨帧跟踪物体的记忆机制。[4] 2025 年 11 月发布的 SAM 3 又增加了文本和示例(exemplar)提示。[4][5]
第一代 SAM 表明,同一个由提示驱动的模型可以用于差异很大的图像类型,而且大规模、仔细标注的数据集可以在模型的帮助下建成。[1] 之后的几代延续了同一思路,即用提示驱动分割模型,并逐代增加新的输入方式。[4][5]
版本时间线
3-
2023
-
2023 年 4 月 5 日
Segment Anything 分割一切模型(SAM) · 本页
Segment Anything 模型(SAM)是 Meta AI 于 2023 年 4 月发布的可提示图像分割模型。给它一个点、框或掩码,它就能圈出对应的物体。
-
2023 年 4 月 5 日
Segment Anything 分割一切模型(SAM) · 本页
-
2024
-
2024 年 7 月 29 日
SAM 2(分割一切模型第二代)
SAM 2 是 Meta 于 2024 年 7 月发布的分割一切模型第二代,可以实时分割图像和视频中的物体。随模型发布的还有 SA-V 视频数据集。
-
2024 年 7 月 29 日
SAM 2(分割一切模型第二代)
-
2025
-
2025 年 11 月 19 日
SAM 3(分割一切模型第三代)
SAM 3 是 Meta 于 2025 年 11 月发布的分割一切模型第三代,可依据简短文字或示例图像,找出并分割某一概念的全部实例。Meta 报告称,它在这项任务上的准确率是现有系统的两倍。
-
2025 年 11 月 19 日
SAM 3(分割一切模型第三代)
20241
-
2024 年 7 月 29 日,Meta 发布 SAM 2,这是一个能在图片和视频中实时进行可提示分割的统一模型:用户给出简单提示,模型就能勾出目标物体的轮廓。代码和权重以开源许可发布。
20231
-
发布Meta 发布 Segment Anything 模型和 SA-1B 数据集
2023 年 4 月 5 日,Meta 发布可提示的图像分割模型 Segment Anything(SAM),并公开超过 11 亿个掩码的 SA-1B 数据集。
开发方1
后继1
采用1
注释与来源
- Introducing Segment Anything: Working toward the first foundation model for image segmentationhttps://ai.meta.com/blog/segment-anything-foundation-model-image-segmentation/
- Segment Anythinghttps://arxiv.org/abs/2304.02643
- Introducing New AI Experiences Across Our Family of Apps and Deviceshttps://about.fb.com/news/2023/09/introducing-ai-powered-assistants-characters-and-creative-tools/
- Introducing SAM 2: The next generation of Meta Segment Anything Model for videos and imageshttps://ai.meta.com/blog/segment-anything-2/
- New Segment Anything Models Make it Easier to Detect Objects and Create 3D Reconstructionshttps://about.fb.com/news/2025/11/new-sam-models-detect-objects-create-3d-reconstructions/
引用本页: Segment Anything 分割一切模型(SAM). TellWorld, https://www.tellworld.net/zh/models/segment-anything. 更新于 2026-11-08