Artificial Analysis 将推机器人操控基准
AI 总结
Artificial Analysis 在 X 上预告将发布 AA-Robotics v0.1,称该基准用于检验当前前沿语言模型能否在零样本、无任何提示指导的情况下操控真实机械臂。帖文没有给出发布时间、参评模型、具体任务或评分方式,因此目前只是一则基准预告,而非评测结果。如果按其描述落地,这项评测会把语言模型的能力考察从文本与软件任务延伸到实体机器人控制。
深度见解
语言模型能否零样本驱动物理硬件,是判断其能力边界的一个具体问题,但该基准尚未发布,实际价值仍待结果验证。