OpenRouter榜单的信用为何缩水
AI 总结
文章认为,OpenRouter榜单统计的是经由单一平台中转的Token量,并不等同于全球开发者偏好;价格、折扣、免费额度、批量任务和厂商自测都可能显著放大调用量。文章还质疑Artificial Analysis与ARC-AGI在考纲、权重、评分锚点、接口能力和版本不断变化时的分数可比性。
深度见解
模型选型不应只看单期排名,还应核对评测版本、统计口径和单位任务成本。
文章认为,OpenRouter榜单统计的是经由单一平台中转的Token量,并不等同于全球开发者偏好;价格、折扣、免费额度、批量任务和厂商自测都可能显著放大调用量。文章还质疑Artificial Analysis与ARC-AGI在考纲、权重、评分锚点、接口能力和版本不断变化时的分数可比性。
模型选型不应只看单期排名,还应核对评测版本、统计口径和单位任务成本。
还没有评论,来说说你的看法。