AI 资源库 · 已整理 4 项

训练与微调

查看与训练与微调相关的 AI 资讯、工具、Skill、工作流和开源项目。

OpenEnv:面向智能体强化学习的隔离执行环境框架

openenv/OpenEnv · An interface library for RL post training with environments.

OpenEnv 是一个用于创建、部署和使用隔离执行环境的端到端框架,面向智能体强化学习后训练。它提供 Gymnasium 风格的 reset/step/state API(支持同步与异步,通过 WebSocket 连接),每个环境以 Docker 镜像形式在本地、云沙箱或 Hugging Face Space 上运行,并提供 40+ 个现成环境(游戏、代码沙箱、浏览器、金融、模拟器等)。项目支持与 TRL、Unsloth、SkyRL、ART、Oumi、torchforge、Miles 等训练框架配合,内置奖励组合与 Inspect AI 评测能力,同时可通过 CLI 脚手架创建、校验和推送自定义环境。

☆ 收藏查看来源 ↗

smithtune:在 LangSmith 轨迹上微调模型并评测部署

langchain-ai/smithtune · LangSmith Post-Training CLI

smithtune 是 LangChain 推出的后训练 CLI 工具(早期 beta),用于将 LangSmith 中记录的 agent 轨迹整理为数据集,并借助 Fireworks 或 Baseten 进行模型微调。它覆盖从轨迹拉取、数据集筛选与可选的多模型评审(agent council),到数据准备、训练、基于 judge 的基础模型与微调模型对比评测,以及在 Fireworks 或 Baseten 上部署推理端点的完整流程,并提供可供编码 agent 使用的 smithtune skill。训练、评测和部署会产生提供商费用,命令与目录格式可能在版本间变化,README 未说明具体硬件、成本与免费/商用授权条件。

☆ 收藏查看来源 ↗

Coding Sahayi:本地优先的 Windows 自主 AI 编程 IDE

codingsahayi/codingsahayi.github.io · Autonomous, privacy-first C# IDE built with WinUI 3. Features multi-agent swarm orchestration, ConPTY test-driven repair, and in-IDE local model fine-tuning with Soup to slash AI token costs.

Coding Sahayi 是一款基于 WinUI 3 与 .NET 8 构建的 Windows 桌面 AI 编程 IDE,强调本地优先与隐私保护。它通过 Ollama 或 LM Studio 等本地推理端点运行模型,实现代码不出本机;内置四类专用 Agent(架构、执行、评审、记录)通过原生 ConPTY 伪终端执行编译与测试命令,在单元测试失败时自动生成修复补丁并循环验证,直到测试通过;同时借助 DiffPlex 提供受控的并排差异审阅,再用 EF Core SQLite 记忆库保存已验证补丁,用于对本地模型进行持续微调。

☆ 收藏查看来源 ↗

ACTF Core:企业级分布式持续训练与模型治理平台

AdolphoIgor/actf-core · Enterprise Distributed Continuous Training (CT) and Model Governance Platform

ACTF Core 是一个面向受监管行业(RegTech、FinTech、医疗等)的企业级参考架构,用于基础模型的自动化持续预训练、领域适配与监督微调(SFT)。平台将关系型数据湖仓、分布式计算集群、内存自动微分引擎与自动化统计评估防火墙串联为一个不可变、确定性的训练闭环,并提供五级质量防火墙,在存储契约、数据泄漏边界、张量图稳定性与统计非劣性等环节进行把关,最后通过 MLflow 模型注册表别名(@champion)完成候选模型晋升。

☆ 收藏查看来源 ↗