LEGO-Anything 让编码智能体从单张照片生成 Blender 3D 场景
研究团队提出 Image-to-Code 方法,让编码智能体从单张照片出发,迭代编写并运行 Blender 程序,直到场景匹配原图,输出可直接运行和修改的代码。
推荐理由:LEGO-Bench 用模拟器场景提供精确 3D 真值,揭示编码智能体自评几何接近随机水平这一关键局限。
研究团队提出 Image-to-Code 方法,让编码智能体从单张照片出发,迭代编写并运行 Blender 程序,直到场景匹配原图,输出可直接运行和修改的代码。
推荐理由:LEGO-Bench 用模拟器场景提供精确 3D 真值,揭示编码智能体自评几何接近随机水平这一关键局限。
OpenAI 发布新分析,指出热门编码基准 SWE-Bench Pro 存在可靠性问题,引发对 AI 模型评测准确性的担忧。该分析聚焦于如何从编码评测中区分有效信号与噪声。
OpenAI 发布 SWE-Lancer 基准,用于测试前沿大语言模型能否在真实自由职业软件工程任务中赚到 100 万美元。该基准以真实世界的自由职业软件工程工作为评测对象。
推荐理由:OpenAI 用真实自由职业软件工程任务构建基准,读者可了解前沿 LLM 在真实编码工作上的变现能力如何被衡量。
OpenAI 发布 SWE-bench 的人工校验子集 SWE-bench Verified,用于更可靠地评估 AI 模型解决真实软件问题的能力。
推荐理由:OpenAI 发布人工校验的 SWE-bench 子集,读者可了解现有代码评测基准为何需要人工筛选。