跳到正文

#评测/基准

今日 0 条
9月28日周一
8月17日周一
8月13日周四
  1. Microsoft Research44

    MindTopo 揭示 VLM 的空间推理能力

    微软研究院的新基准 MindTopo 发现,专有与开放权重多模态模型在静态拓扑推理上明显强于交互规划,且都远低于人类。它按连续性、分离、顺序、包围和绳结五类,测试静态场景问答,以及模拟环境中须维持或改变关系的动作规划。规划失败常在理解场景之后出现,模型失去对结构关系的追踪,或提出违反环境约束的动作。

8月10日周一
  1. Import AI63

    Import AI 468:23 个 RSI 政策想法、PostTrainBench+ 以及信任与透明度如何影响 AI 竞赛

    Import AI 468 分析了 23 个关于递归自改进的低风险政策建议,包括提供透明度、风险管理策略和国际合作等七大类别。作者还讨论了游戏理论论文 Racing to Ruin 如何通过信任和透明度实现 AI 竞赛的稳定协调,以及 PostTrainBench 基准上 AI 系统自动化 R&D 表现优于人类基线的事实。

4月9日周四