ALGOIT | AI News & How-Tos· 来源· @ai_algoit · X·· 2 小时前精选AI 评分70
推荐理由
文章披露了AA-3D基准的测试方法与Claude Fable 5.2的具体得分,读者可据此评估模型构建3D场景的能力。
正文 · AI 翻译
人工分析 🔥:Claude Fable 5.2 现已在 AA-3D 上排名第一,AA-3D 是衡量 AI 模型构建交互式 3D 场景能力的基准,其领先优势超出了误差范围。
在最大设置下,它得分为 1271 Elo,比 Claude Sonnet 5.5(1204)高出 67 分,比 Claude Opus 5.5(1202)高出 69 分。其 95% 置信区间为 1246 至 1297,与其他任何模型均无重叠。它比 Fable 5.1 高出 132 分,并领先于 GPT-6 Astra(1168)和 Gemini 4 Argon(1147)。
每份书面简报(从可玩的弹球桌到斗兽场)都生成一个单独的 three.js 网页。模型作为智能体在离线沙盒中工作,使用 Blender、Rapier 物理引擎、Python 和无头浏览器渲染场景,检查自己的截图并进行修订。每次运行在三小时或 250 轮后停止。随后人类评审员对盲测配对进行比较,每个场景至少观看 30 秒,投票结果转化为 Elo 分数。
来源:ALGOIT | AI News & How-Tos · x.com