一项新研究通过"影子评估"测试前沿 AI 智能体能否独立完成开放式 AI 研究。
智能体在六天和数千美元算力下完成了全部工程任务,但未能对两项未发表的 NeurIPS 2026 论文的核心研究问题取得实质性进展,被原作者明确拒稿。
研究识别出五大失败模式,包括对发表标准判断不足、研究设计缺乏创意、无法有效回溯死胡同、资源意识差和指令漂移。
Un nuevo estudio utiliza la "evaluación en la sombra" para probar si los agentes de IA avanzados pueden realizar investigación de IA abierta de manera inde...
Un nuevo estudio utiliza la "evaluación en la sombra" para probar si los agentes de IA avanzados
pueden realizar investigación de IA abierta de manera independiente. Los agentes completaron todas las tareas de ingeniería en seis días y con varios miles de dólares en potencia de cálculo, pero no lograron avanzar significativamente en los problemas de investigación centrales de dos artículos inéditos de NeurIPS 2026, siendo rechazados explícitamente por los autores originales. El estudio identificó cinco principales modos de fallo, incluyendo insuficiente juicio sobre los estándares de publicación, falta de creatividad en el diseño de investigación, incapacidad de retroceder efectivamente desde callejones sin salida, conciencia limitada de los recursos y desviación de instrucciones.
一项新研究通过"影子评估"测试前沿 AI 智能体能否独立完成开放式 AI 研究。
智能体在六天和数千美元算力下完成了全部工程任务,但未能对两项未发表的 NeurIPS 2026 论文的核心研究问题取得实质性进展,被原作者明确拒稿。
研究识别出五大失败模式,包括对发表标准判断不足、研究设计缺乏创意、无法有效回溯死胡同、资源意识差和指令漂移。
研究以“影子评估”检验前沿 AI 智能体独立开展开放式 AI 研究的能力。智能体虽在六天内完成全部工程任务,却未对两项核心研究问题取得实质性进展。
评估对象涉及两项未发表的 NeurIPS 2026 论文,实验投入为六天和数千美元算力。最终成果被原作者明确拒稿,显示工程任务完成不等于达到论文发表标准。
Aioga 判断,这项早期证据揭示了研究自动化中的关键落差:智能体能够推进工程执行,但在选题判断、研究创意与失败后的路线调整方面仍可能难以胜任开放式研究。
值得关注的是,研究归纳的五类失败模式同时涉及判断、创意、回溯、资源意识和指令遵循。这可能意味着,评估研究型智能体不能只看任务完成率,还需检查成果质量与过程稳定性。 Aioga 判断,后续应重点观察更多研究案例能否复现这些失败模式,并分别评估发表标准判断、研究设计、死胡同回溯、资源管理和指令稳定性,而非据两项案例作普遍结论。
La fuente proporciona título, resumen, atribución y enlace original. Aioga no republica el artículo completo.
Canal de ingesta: Agregación de resúmenes · Dominio original: arxiv.org
Fuente: HuggingFace Daily Papers(社区热门论文)
Enlace original: Abrir fuente original
Archivo Aioga: Abrir página de inteligencia
Content record: summary-fallback · Updated: 2026-07-29T00:00:00.000Z

统一接入主流 AI 模型 API,为开发、测试与生产环境提供稳定调用入口。
立即访问 api.w173.comAioga agrega novedades globales de IA y conserva las fuentes para verificación y cita.