ARIS (Auto Research In Sleep) 测试摘要
结论:PASS
ARIS 为科研全流程自动化提供了结构化框架,idea-discovery 和 auto-review-loop 模块在 Codex 环境内可直接使用(无需外部 API),适合有计算资源的科研团队用于文献调研、idea 生成和实验设计辅助。
测试概览
| 模块 | 任务数 | Pass | 说明 |
|---|---|---|---|
| literature-discovery | 1 | 1 | 从研究方向生成结构化 research idea(电催化 NO3RR) |
| research-writing | 2 | 2 | 审稿循环单轮模拟 + 基于数据撰写论文段落 |
| computational-modeling | 1 | 1 | DFT 实验设计含参数、工作流、失败模式 |
核心能力
- idea-discovery:四阶段过滤(文献→生成→新颖性检查→精炼),有效避免低质量 idea
- auto-review-loop:评分-修正-再评审循环,有明确终止条件和 honesty 规则
- paper-write:证据密度要求抑制 AI 模板化写作
- Codex 适配版(skills-codex/):消除外部 API 依赖
核心风险
- 完整端到端流程需 GPU 计算资源和数小时运行时间
- 文献搜索依赖网络(arXiv API)
- 交叉审稿(Type-B)需额外 overlay 安装
- 产出需人工核验领域准确性