评测与安全01
llm-jp/simple-evals-mm · A lightweight library for evaluating vision language models.
simple-evals-mm 是 OpenAI simple-evals 的多模态扩展,提供 lightweight、可扩展的视觉语言模型评测框架。它由三部分组成:Sampler 负责统一接入 API 模型与本地模型;Task 负责加载 40+ 个英文与日文基准并完成打分;Run 负责保存可复现的评测记录。支持 LLM 评判、选项匹配、规则与代码执行等打分方式,可复用 run id 续跑、对已存答案重新打分,并生成评测表格与排行榜。
训练与微调02
R0U5/Reforge · A modular LoRA fine-tuning pipeline for Hugging Face models with built-in data cleaning, smart early stopping, automatic mode detection, and cross-platform support.
Reforge 是一个面向 Hugging Face 因果语言模型和视觉语言模型的模块化 LoRA 微调流水线,覆盖数据集加载与模式自动识别、文本清洗、分词、训练、LoRA 合并和模型导出。它支持 SFT、原始文本、聊天和多模态四种训练模式,内置基于 EMA 的早停、自动序列长度、断点恢复、交互式本地模型选择,并提供 Tkinter 仪表盘用于配置编辑和实时损失曲线查看。
知识库与 RAG03
wenxin123abc/pdf-rag-pipeline · Traceable PDF-to-RAG preprocessing and retrieval toolkit, also packaged as a Codex Skill.
该项目用 Python 实现,面向文本型 PDF 的本地 RAG 预处理、检索与评测。它把 PDF 转换为 page、section、table、image 四类可检索对象,并保留页码、章节层级、表格结构与 bbox 引用位置,支持批量目录构建、带磁盘缓存的 BM25 中文检索、按页读页与查表查图、原文引用、模型无关的图片描述回填、recall@k/MRR/页码准确率/表格数值一致率评测,以及单文件离线 HTML 引用预览。项目定位为 RAG 中最脏的预处理层,不内置 LLM 问答层、向量数据库或 SaaS 前端,纯扫描件需外部 OCR。
学习与研究04
ybak/ai-tutorial · 一本开源的 AgentScope Java 中文教程:7 篇 44 章、839 页成书体量的完整 Markdown 源稿,由浅入深覆盖从第一个 Agent 到生产级 Agent 平台的全部主题。
这是一个面向团队教程书架的开源仓库,包含多本“从入门到进阶”的中文教程书,每本自带书稿、图片和动手 Demo。已发布 AgentScope Java 2.0(7 篇 44 章,从第一个 Agent 到生产级 Agent 平台)、MCP(4 篇 12 章,跨框架工具接入协议)、RAGFlow(4 篇 13 章,从搭建知识库到生产级检索调优)、CopilotKit(4 篇 8 章,在 React 应用中接入 AI Agent),Langfuse 书还在规划中。仓库还提供按角色(开发、测试、运维、产品、运营)划分的学习路线,以及站点和单书 PDF 的构建说明,可用于团队学习 Agent 开发、RAG 知识库、前端 AI 集成与工具协议。
Agent 与自动化05
pisces19860207/zhengdao · Native Android AI agent: 抱朴 is a first-party, in-process harness that reads and writes your files, handles images and pages, plans and writes. 玄览 is the browser it sees through. The terminal is a separate app (zhengdao-term). No root, no Termux, no ADB. 安卓原生 AI agent:内置抱朴+玄览浏览器;终端独立为 zhengdao-term。Android 16 (API 36) + arm64.
证道是运行在 Android 16(API 36)arm64 设备上的原生 AI agent 运行环境,包含内置助手「抱朴」与内置浏览器「玄览」。抱朴可读写工作区文件、扫描手机存储(只读可取消)、执行定时任务、连接外部 MCP 工具服务器、读取网页与图片、整理资料库并建立本地索引、撰写与续写文本;玄览负责在 App 内打开网页并把页面交给抱朴查看。项目强调治理优先:破坏性操作需用户确认,副作用记入决策中心,交付需通过验收,技能与记忆变更先备份、可回滚;系统不含 shell 执行能力,也不支持跨 App 模拟操作,且不自带模型,需用户自行配置模型服务商与 Key。
AI 编程06
JimmyDi/loop · A local-first, provider-agnostic agent harness.
Loop 是一个用 TypeScript 编写的本地优先开源编码 harness(编码 Agent 工具)。它提供 Web UI、CLI 和 TypeScript SDK 三种使用方式,可以读取和编辑项目文件、执行 shell 命令与测试,并连接内置模型提供商、自定义网关或兼容的本地模型端点。对话与设置保存在本机,支持按项目保存和恢复会话、加载可复用 Skills、在 Web UI 或 SDK 中使用外部 MCP 工具,并通过权限预设控制工具访问。
Agent 与自动化07
harness-mini/harness-mini · A minimal outer harness for developers' long coding tasks. Files + shell: skills, sub-agents, and distilled docs. Keeps multi-session work on-task, context-light, and resumable.
harness-mini 是一个面向开发者跨会话长时编程任务的最小外层脚手架(outer harness),以 Markdown 技能文件与轻量 POSIX shell 脚本为核心,通过技能、子代理、计划、检查点与评测机制,让编码代理在多会话功能开发中保持目标聚焦、控制上下文占用并支持断点续跑。项目通过 intake → prd → issues → implement ⇄ evaluate → checkpoint → done 的生命周期状态机推进工作,要求 done 阶段必须有独立评测记录,并提供初始化安装、版本更新、健康检查、状态与指标汇总等命令行入口。
Agent 与自动化08
fengshihao/agent1 · 给低端 Android 设备的开箱即用智能体 SDK:约 3MB 内核、内置 QuickJS,能力靠 find_caps 按需检索,可自进化。A compact coding agent SDK for Android / embedded JVM.
Agent1 是一个可嵌入 Android 及嵌入式 JVM 宿主的紧凑型编程智能体 SDK。其 java-agent-core 约 3MB,内置 ReAct 会话、工作区沙箱、工具循环与 JSONL 审计;模型通过 run_js 编写 JavaScript(依赖 Weizhi/QuickJS)来编排任务,并通过 find_caps 按需检索 Skill、脚本、平台 API 与 MCP 工具摘要,从而避免把大量工具塞入提示词。项目提供 Android 参考 App、桌面 CLI 与本地 Web UI,还描述了把可复用 Skill 晋升到 shared/local 的自进化思路。
Agent 与自动化09
costajohnt/oss-autopilot · Claude Code plugin — AI-powered autopilot for managing open source contributions. Track PRs, respond to maintainers, discover issues, maintain velocity.
OSS Autopilot 是一个 Claude Code 插件、MCP 服务器和独立 CLI 三合一的工具,用于跟踪自己在 GitHub 上的开源 PR。它从 GitHub 拉取并分类开放 PR(CI 失败、被要求修改、未回复维护者、冲突等),协助起草回复、诊断 CI 失败或准备 rebase 修复,每条推送与评论都需用户逐项批准。另提供 issue 搜索与筛选、本地仪表盘、无人值守夜间模式及贡献统计。
知识库与 RAG10
AmberLee2427/nancy-brain · Nancy's RAG backend and HTTP API/MCP server connectors.
Nancy Brain 是一个基于 Python 的 RAG 知识库构建与服务工具,可把 GitHub 仓库的源码、文档、示例和 Notebook,以及 PDF 文章,处理为可检索索引。它提供命令行、Streamlit 管理界面、FastAPI HTTP API 和 MCP 服务器连接器,并支持扩展名/路径加权、双嵌入(文本与代码)、可选文档摘要、PDF OCR 缓存等配置,面向 Slack、IDE、Claude Desktop 等 AI 客户端提供搜索与检索能力。
评测与安全11
cncf/k8s-ai-conformance · Kubernetes AI Conformance
该项目由 CNCF 维护,定义了 Kubernetes 平台可靠运行 AI/ML 工作负载所需具备的能力,覆盖训练、推理和 Agentic 工作负载三类场景。它面向平台厂商提供一致性认证流程:在基础 Kubernetes 一致性认证之上,填写一致性检查清单、附上公开文档证据,并在 v1.37+ 推荐运行上游 AI Conformance 测试套件(e2e.log、junit.xml 或 results.json),随后通过 Pull Request 提交,由 CNCF 评审,认证有效期一年,按产品和配置区分。项目同时提供 FAQ、提交说明、条款条件以及 1.35/1.36/1.37 版本检查清单 YAML。
AI 编程12
EnmanuelReynoso23/synrag · Local MCP code search that cuts AI agent tokens: AST chunks, CPU reranking and a dependency impact graph. -63.9% tokens measured.
SyntaxRAG(SYNRAG)是一个本地代码搜索 MCP 引擎,通过 Tree-sitter 按函数、类、类型等 AST 结构切分代码,在 CPU 上用 FlashRank(TinyBERT)对 BM25 候选重排序,并构建依赖影响图。它提供搜索、文件大纲、仓库地图、影响范围分析、测试定位及受控编辑等工具,以减少 AI 代理定位代码时的 token 消耗;附带安装脚本、CLI、可选的变更监视服务和 Gemini 相关可选功能。
AI 编程13
wilsonbrito/brito · Coding-agent CLI with a code knowledge graph, memory and reviewable skills. CLI de agente de código com grafo de conhecimento, memória e skills revisáveis.
Brito 是一个面向软件开发的编码智能体,提供命令行工具 brito-cli 和 macOS/Windows/Linux 桌面应用。它不依赖逐文件 grep 阅读,而是用 tree-sitter 增量索引构建代码知识图谱(符号、调用、导入),支持 TypeScript/JavaScript、Python、Svelte/Vue/Astro 组件及多种后端语言,可通过 graph_search、graph_callers、graph_impact 等工具快速回答“改这里会影响什么”。它还会保存记忆笔记,并在任务完成后反思生成项目技能,新技能先进入试用期,经多次成功使用后转正,涉及危险命令或修改已批准技能时需用户审批,并提供隐私检查(如拒绝密钥、curl | sh 等)与手动/自动编辑/计划/全允许等权限模式。支持 Anthropic API 或 Claude Code 订阅作为后端,也可接入 OpenAI 兼容端点,并可作为 MCP 服务器向其他客户端暴露图谱、记忆与技能。
知识库与 RAG14
dhanyashree-mn/research-paper-rag-qa · RAG system for semantic search over academic PDFs — LangChain, FAISS, Streamlit
该项目是一个面向学术论文 PDF 的检索增强(RAG)语义搜索工具:逐页解析 PDF,将文本切分为带重叠的片段,使用 sentence-transformers/all-MiniLM-L6-v2 生成归一化向量并存入 FAISS 索引,再通过 Streamlit 界面用自然语言查询返回最相关的段落及来源文件与页码。项目刻意只做检索、不做答案生成,以保证每条结果可追溯到原文页面、避免内容幻觉;仓库包含作者硕士阶段的示例 PDF。
学习与研究15
rxmna8502/vybe-intelligence-vault · An auto-updating open-source vault for AI agents, RAG systems, MCP servers, prompts, tools, templates, and next-generation web development.
Vybe Intelligence Vault 是一个自更新的开源知识仓库,索引 AI Agent、RAG、MCP 服务器、提示词、工具和模板等前沿资料,并宣称通过采集管线、LLM 评估和向量关系构建语义知识图谱。项目提供 MCP 网关供 Claude Desktop、Cursor 等 Agent 直接查询节点上下文,还包含基于 React Three Fiber 和 WebGL 的 3D 知识图谱浏览界面,以及若干 7 天工程学习路径与生产蓝图。
知识库与 RAG16
arashshams/Insurance-Policy-RAG · A RAG assistant that answers plain-English questions about an insurance policy PDF, grounded in the document and cited by page. Built with Gemini embeddings, ChromaDB, and a Streamlit app you can try live.
该项目是一个面向单一保险保单 PDF 的检索增强生成(RAG)问答助手,能够用自然语言回答保险条款问题,并基于文档内容给出页码引用,在文档未覆盖时明确回答“我不知道”。系统使用 Gemini 嵌入模型生成向量,存入 ChromaDB,通过 Streamlit 提供可在线试用的界面,同时也提供 FastAPI 后端和可导入的 Python 管道。项目包含评估工具,覆盖拒答、检索命中率、引用准确性等指标,并支持上传自己的保单 PDF 进行问答。
Agent 与自动化17
kubernetes-sigs/agent-sandbox · agent-sandbox enables easy management of isolated, stateful, singleton workloads, ideal for use cases like AI agent runtimes and reinforcement learning (RL).
Agent Sandbox 是 Kubernetes SIG Apps 下的项目,提供 Sandbox 自定义资源定义(CRD)及控制器,用于以声明式 API 管理长期运行、有状态、单容器的单例工作负载,具备稳定身份、持久存储,以及创建、定时删除、暂停、恢复等生命周期管理。扩展模块提供 SandboxTemplate、SandboxClaim 和 SandboxWarmPool,支持模板复用、从预热池快速认领沙箱。项目自身是沙箱编排器,底层隔离交由 gVisor、Kata Containers 等 Sandbox Runtime(通过 RuntimeClass)负责。适用于 AI Agent 运行时、强化学习与评测、开发环境、Notebook 和有状态单 Pod 服务等场景,并提供 Go SDK、Python SDK 及可选的 Sandbox Router。
Agent 与自动化18
wpfleger96/ai-agent-rules · Manage configs for Claude Code, Codex, Gemini CLI, Goose, and Amp from one repo — symlinks, merge pipeline, profile inheritance, cross-machine sync
该项目通过符号链接把 Claude Code、Goose、Gemini CLI、Codex CLI、Amp 等 AI 编程代理的配置文件集中到一个由 Git 跟踪的位置,支持跨机器同步、配置合并管线、profile 继承与切换、排除规则、机器级设置覆盖、MCP 定义转换和 Claude Code 插件声明式管理。项目以 Python 编写,通过 PyPI 分发,提供 setup、install、status 等命令行子命令。
训练与微调19
tensorflow/tensor2tensor · Library of deep learning models and datasets designed to make deep learning more accessible and accelerate ML research.
Tensor2Tensor(T2T)由 Google Brain 团队与社区开发,是一个汇集深度学习模型和数据集的 Python 库,覆盖数学语言理解、故事问答、图像分类与生成、语言建模、情感分析、语音识别、摘要和机器翻译等任务。它提供 t2t-datagen 数据生成、t2t-trainer 训练评估推理入口,以及命令行切换问题、模型和超参数集,并支持多 GPU 和分布式训练。项目已标记为弃用,仍维护并可接受缺陷修复,官方建议转向后继库 Trax。
学习与研究20
waikato-ahuora-smart-energy-systems/OpenPinch · A comprehensive tool for advanced pinch analysis, total site integration, heat pump integration, and heat exchanger network synthesis.
OpenPinch 是一个基于 Python 的开源工具包,面向夹点分析与全厂能量集成(Total Site Integration)。它支持直接与间接热集成目标计算、图表解读、热泵与制冷筛查、㶲与热电联产后处理、换热器网络综合、多周期分析、物流分段线性化,以及基于文件或 schema-first 的工作流。项目提供 PinchProblem 与 PinchWorkspace 两个工作流类,并附带示例案例和 19 个 Jupyter notebook 教程。