首页›原理
原理
原理
用通俗的话讲清 AI 怎么工作:从人工神经元到 Transformer、预训练和推理模型。
共 17 · 清除筛选
自动驾驶自动驾驶是由计算机系统而非人来操作道路车辆。它的六级自动化量表、两条主要技术路线,以及从1980年代起延续至今的一系列研究车辆,构成了今天讨论这一领域的框架。模仿学习模仿学习通过从专家示范中做监督学习来训练智能体完成任务,而不是靠反复试错。最基本的形式是行为克隆,最主要的弱点是分布偏移。内容溯源(C2PA)内容溯源是附在文件里的来源与编辑记录,让别人能核查媒体从哪里来、经过了哪些改动。Adobe、Arm、BBC、Intel、Microsoft 和 Truepic 于 2021 年共同发起 C2PA 来制定这一标准。文本水印(Watermarking)文本水印是在语言模型生成的文字里嵌入一种人看不见、但程序能从一小段词元中检测出来的信号,用来判断一段文本是否出自某个模型。提示注入(Prompt injection)提示注入(prompt injection)指模型输入里的文字压过原本的指令和外围控制,让攻击者劫持整个应用;2023 年的研究进一步指出,恶意内容可以藏在应用自己检索到的资料里。开源人工智能定义(OSAID)开源人工智能定义(OSAID)是开源促进会于 2024 年 10 月发布的 1.0 版标准,规定一个模型要被称为开源,须公开设计与训练数据信息,并允许使用、修改和在此基础上继续开发。视觉-语言-动作模型 VLA视觉-语言-动作模型(VLA)是一种机器人策略:输入摄像头图像和一句语言指令,直接输出动作,通常由预训练的视觉-语言模型改造而来。仿真到现实迁移仿真到现实迁移指先在仿真中训练机器人策略,再迁移到真实机器人,用合成数据补充昂贵的人工演示数据。强化学习强化学习是机器学习与最优控制的一个分支:智能体在动态环境中通过试错,学习怎样的动作能让奖励信号最大化。多智能体系统多智能体系统由多个相互作用的智能体组成,能解决单个智能体难以完成的问题。近年以大型语言模型为内核的框架,让智能体之间直接对话协作,使这一方向重新受到关注。世界模型世界模型是学习环境内部表示、并预测环境随动作如何变化的机器学习系统。在强化学习中,它相当于从经验中学出的模拟器,让智能体不必在真实环境里反复试错就能规划行动。合成数据(Synthetic data)合成数据是由模型生成、而非从人或从网上收集的训练材料。phi-1 的实验显示,混入模型生成的「教科书」后,一个小规模代码模型也能在代码基准上取得不错的成绩,说明数据质量本身影响能力。具身智能(Embodied AI)具身智能(Embodied AI)指通过与环境的互动来学习的智能体,而不只依赖从互联网上收集的图像、视频或文本数据集;模拟器则是训练和评测这类智能体的虚拟试验台。红队测试(Red teaming)红队测试(red teaming)指在模型部署前主动试探它,看它会不会做出有害或不被期望的行为。2022 年 Perez 等人提出用一个语言模型为另一个语言模型自动生成测试用例的方法,把这件事部分自动化了。越狱(Jailbreak)越狱(jailbreak)是用对抗性提示让经过安全训练的模型做出其训练本应阻止的行为。Wei 等人在 2023 年 7 月的一篇分析中,把这类失败归因于目标冲突与泛化不匹配两种失效模式。语义网语义网是 W3C 推动的一套标准与技术,用 RDF 和 OWL 描述数据,让不同应用、企业和社区能够共享和复用信息,并推动相关技术走向实用工具。视觉里程计视觉里程计让巡视器通过跟踪行驶前后相机图像中的地形特征,测出自己实际移动了多远,而不是只靠数车轮转数。NASA 的火星探测车首次实际演示了这项技术。