AI 资源库 · 已整理 2 项

并行实验

查看与并行实验相关的 AI 资讯、工具、Skill、工作流和开源项目。

autoresearch:让 AI Agent 自主迭代单 GPU 上的 nanochat 训练实验

karpathy/autoresearch · AI agents running research on single-GPU nanochat training automatically

autoresearch 提供一个可自主运行的 LLM 训练研究循环:给 AI Agent 一个精简版单 GPU nanochat 训练环境,Agent 自动修改 train.py、训练 5 分钟后以 val_bpb 评估结果并决定保留或丢弃,不断重复,从而在夜间无人干预地积累实验日志并可能得到更好的模型。仓库刻意保持精简,只有 prepare.py(数据准备与运行时工具,不改动)、train.py(Agent 修改的模型、优化器与训练循环)和 program.md(供人类为 Agent 编写研究指令)三个核心文件。

☆ 收藏查看来源 ↗

Harbor:面向容器环境评估与优化智能体和语言模型的框架

harbor-framework/harbor · Framework for evaluating and improving agents

Harbor 是由 Terminal-Bench 团队开发的框架,用于评估与优化智能体和语言模型。它支持评估 Claude Code、OpenHands、Codex CLI 等各类智能体,构建和分享自定义基准与运行环境,通过 Daytona、Modal、LangSmith、Blaxel、Novita Sandbox、Tensorlake、Runta、Sail 等提供方并行运行上千个环境开展实验,并为强化学习优化生成 rollout。Harbor 是 Terminal-Bench-2.0 的官方评测框架。

☆ 收藏查看来源 ↗