首页›论文
论文
论文
对人工智能有重大贡献的论文,每篇都有通俗解读。
共 58 · 清除筛选
- 2026
- 2026
《Terminal-Bench:命令行界面中困难真实任务的智能体基准》
arXiv
Terminal-Bench 2.0 是一个由 89 个困难任务组成的精选基准,任务都在计算机终端环境中完成,用来衡量 AI 智能体处理真实命令行工作的能力;前沿模型和智能体的得分低于 65%。
- 2025
《Kimi K2:开放的智能体智能》
arXiv
Kimi K2 是 Moonshot AI 的万亿参数混合专家模型,用 MuonClip 优化器完成预训练,并以大规模智能体数据与强化学习做后训练;报告称它在开源非思考模型中处于领先,并公开了基座与后训练权重。
- 2024
《FrontierMath:评估 AI 高级数学推理能力的基准》
arXiv
FrontierMath 是由 Epoch AI 推出的数学基准,包含数百道由专家数学家撰写与审核的原创高难度题目,用来考察 AI 的高级数学推理能力。发布时,最先进的模型解出的题目不足 2%。[^1][^2]
- 2024
《τ-bench:真实领域中的工具-智能体-用户交互基准》
arXiv
τ-bench 是 2024 年 6 月提交到 arXiv 的基准,用语言模型模拟用户,与配备领域 API 工具和规则条文的语言智能体进行动态对话,并以对话结束时的数据库状态而非回复文本判定成败。
- 2024
Accurate structure prediction of biomolecular interactions with AlphaFold 3
Nature
AlphaFold 3 于2024年5月发表于《自然》,把结构预测扩展到生物分子相互作用,在蛋白质—配体结合上准确率高于对接工具,抗体—抗原预测高于 AlphaFold-Multimer v.2.3。
- 2024
《OSWorld:真实计算机环境中开放式任务的多模态智能体基准》
arXiv
OSWorld 是一个面向多模态智能体的基准与环境,在 Ubuntu、Windows 和 macOS 上用 369 个真实计算机任务考察智能体;人类能完成 72.36% 以上,最好的模型只有 12.24%。
- 2024
《LiveCodeBench:面向代码的大模型全面且无污染评测》
arXiv
一个持续从 LeetCode、AtCoder、CodeForces 竞赛中收集新题的代码大模型基准,用不断更新的题库避免数据污染,并覆盖代码修复、执行推理等任务。
- 2023
Scaling deep learning for materials discovery
Nature
2023 年发表于《自然》的一篇论文,报告了一套用于材料发现的规模化深度学习方案:预测出 220 万个位于凸包之下的结构,并把稳定性预测的成功率从约 50% 提升到 80%。
- 2023
- 2023
《GPQA:研究生级防搜索问答基准》
arXiv
GPQA 是包含 448 道选择题的问答基准,题目由生物学、物理学和化学专家撰写,设计成熟练非专家靠上网也答不出;基于 GPT-4 的最强基线正确率只有 39%,而同领域专家达到 65%。
- 2023
《SWE-bench:语言模型能解决真实 GitHub 议题吗?》
arXiv
一个由 2,294 个真实软件工程问题组成的评测基准,题目取自 GitHub 议题及解决这些议题的拉取请求,模型必须编辑代码库来修复问题;发布时最好的模型解决率不足 2%。
- 2023
《WebArena:构建自主智能体的真实网络环境》
arXiv
WebArena 是可复现的网页环境,含电子商务、社交论坛、协作软件开发、内容管理四类网站,用于测试语言引导的智能体;GPT-4 智能体成功率 14.41%,人类 78.24%。[^1]
- 2023
- 2022
Learning skillful medium-range global weather forecasting
Science
GraphCast 是一个基于图神经网络的全球天气模型,用四十年的再分析资料训练,能在不到一分钟内给出 0.25 度分辨率、未来 10 天的全球预报,并在多数检验指标上超过当时最准确的业务确定性预报系统。
- 2022
- 2022
用深度强化学习控制托卡马克等离子体的磁场
Nature
2022 年发表于 Nature 的一篇论文,Degrave、Felici 等人用深度强化学习让控制器自主学会给托卡马克的全部磁控制线圈下指令,产生并维持了多种等离子体位形。
- 2021
《用大语言模型做程序合成》(MBPP)
arXiv
2021 年提交到 arXiv 的论文,提出 MBPP 基准:974 道入门级短 Python 题,并测量 244M 到 137B 参数的语言模型把自然语言描述变成代码的能力。
- 2021
- 2021
《评估在代码上训练的大语言模型》(Codex / HumanEval)
arXiv
2021 年的一篇 OpenAI 论文提出了 Codex——一个在公开 GitHub 代码上微调的 GPT 模型,以及 HumanEval——一套按「程序能否跑对」而不是「像不像参考答案」来评判生成代码的评测集。