Mercor研究:美国90%工时缺乏AI基准覆盖
AI 总结
Mercor 的 Labor Index 研究把 29 个 AI 基准映射到美国劳工部 O*NET 的 923 个职业、共 18,797 项任务,结果只有 208 个职业存在至少 5 条基准提示覆盖其某项任务,22 个职业族中有 6 个完全没有这类覆盖。据此估算,美国约 90% 的工作时间花在现有基准覆盖很少或没有覆盖的任务上。报告称覆盖并不随机:被标记为 AI 暴露度高的任务出现在基准中的概率约高 6 倍,工资总额更大的职业以及被认为是该职业最重要的任务也更容易被覆盖(后者约高 6–10 倍),作者强调这一结果是初步的,将随基准清单扩充而更新。
深度见解
基准覆盖的盲区会影响企业选型、政策评估与个人职业判断对模型实际工作能力的估计。
The Benchmark Map
Each tile represents one of the 923 ONET occupations making up the US labor force, grouped into 22 job families. Occupations are shaded according to the share of their tasks which are represented in our initial list of AI benchmarks. A single benchmark prompt can be mapped to multiple ONET tasks.
click a family to open it
Coverage by
Covered with at least
- Benchmark Index
- No coverage