MATMASTER · MATERIALS AGENT BENCHMARK

从懂领域,
到真正把实验做完

材料科研不是一道单点问答。智能体需要理解领域、完成计算、攻克复杂科研问题,并在实验环境中正确、安全、按序执行。

查看完整能力链

01 / THE BENCHMARK CHAIN

一条从知识覆盖走向真实执行的能力链

懂领域会计算能攻坚可执行实验

02 / T1 · DOMAIN COVERAGE

先覆盖材料科学全场景,
再谈专业能力

5,135完整任务文件组
975workflows
11类材料体系
储能电池催化半导体与光电子磁性材料核能增材制造燃料电池电解水 / 电催化热电转换太阳能电池介电与铁电超导材料拓扑材料储氢与气体分离碳捕集与水处理生物医用结构承载腐蚀防护通用材料研究

19 类应用场景全覆盖,横跨金属与合金、无机非金属、高分子与软物质、多孔、低维纳米、生物、核材料与超材料等体系。

03 / WHAT THE QUESTIONS ASK

从常规结构计算,
进入复杂科研边界

题目分布显示,T2 检验全链路计算能力;T3 把任务推向论文级、多步数值科研问题。
T2

通用材料计算

主要题型 · 题级多标签口径

604
力 / 结构与几何
325
电子结构
132
能量与稳定性
96
材料数据与拟合
53
机器学习势
43
缺陷 / 表面 / 界面
42
另含分子动力学 41 题等,共覆盖 14 类关键计算问题。
T3

高精尖科研攻坚

11 类论文科研问题

110
磁性、自旋与统计相变
32
力学、弹性、塑性与失效
12
表面、界面、生长与形貌
12
电子结构、量子态与半导体
11
缺陷、扩散与载流输运
9
光谱、光学、声学与响应反演
8
共 11 类科研问题,另含热力学/相变、多尺度微结构、热输运等。

04 / COMPUTATIONAL MATERIALS SCIENCE

同一执行与评分合同下,
MatMaster 在 T2、T3 双领先

材料语义、方法知识与证据闭环,共同决定科研任务能否真正完成。

T2 · 通用材料计算

604 题
MatMaster79.2
Claude Code73.1
Codex69.4

T3 · 高精尖科研攻坚

110 题
MatMaster66.59
Codex53.37
Claude Code51.77
01材料语义理解

把成分、结构、价态、缺陷、边界条件和物性联系起来。

02材料方法知识

理解 DFT、MD、MC/KMC、相场、势函数、输运和谱学方法的执行要求。

03科学证据闭环

把结论对应到原始输出、中间文件、运行轨迹和独立复算结果。

05 / EXPERIMENTAL MATERIALS SCIENCE

实验不是答对终点,
而是走对每一步

同批 144 道真实实验题,三个 AI 助手在同一座虚拟实验室里各做一遍——比谁做得对,也比谁的实验过程经得起复查。

PASS RATE COMPARISON

三道关卡,MatMaster 全程领先

MatMasterCodexClaude Code
40 / 144MatMaster 三道门全通过27.8%
8

REPRESENTATIVE WORKFLOW

先读状态,再动手;
做完必须留下记录

代表题需要完成两条支路、合流滴加并持续搅拌。设备初始状态和动作前置条件不写在题面里,智能体必须自己发现。

  1. 01拆成有先后关系的实验步骤
  2. 02每次操作前确认当前条件
  3. 03完成操作并留下完整过程记录
结果要对,过程也要经得起复查。
T4 操作覆盖796action steps
加料 / 移液
76
配制 / 混合
74
放置固定 / 装载
63
搅拌 / 分散
24
加热 / 水热前处理
15

EXPLORE THE EVIDENCE

沿着能力链,进入每一道任务

T1领域覆盖T2通用材料计算T3高精尖科研攻坚T4实验指导与执行CASE论文复现案例展示