← 返回列表

Verdict:面向 LLM 调用的故障关闭路由与可验证回执编排

mrnicholasbcarter-code/verdict-core · Fail-closed LLM routing: cheapest qualified model, named drop reasons, receipts.

GitHub原文发布 未知首次收录 2026-09-30上架 2026-10-01 09:01

☆ 收藏查看项目 ↗

ELI5:它是什么,解决什么问题

Verdict 是一个 Python 编写的 LLM 编排与控制平面:输入一个目标和 git 仓库,先由规划模型把目标拆成小型 DAG 工作节点,再从实时网关证据(模型清单、账号、健康状态、冷却和配额)中构建准入模型集合,为每个节点分配最便宜且合格的路由,在配额、限流、超时或空回答等故障发生时进行同节点故障转移与冷却,并在节点验证、集成校验和独立评审后写入带 SHA-256 摘要的运行回执。它强调封闭失败:没有任何合格候选或重试超过上限时以命名原因 FAIL_CLOSED 并结束为 BLOCKED;被丢弃的候选都有具名理由,不透明的 auto/* 引用不作为候选,付费路由在仍有更便宜合格候选时不会被选中。执行层依赖外部工具 OmniRoute(本地 OpenAI 兼容网关)和 Prime Agent(无头编码 Agent CLI),评审使用 ocr CLI。

核心能力与快速开始

★ 1 · Python

能做什么
将目标规划为带归属文件和验证命令的 DAG;基于实时网关证据(清单、账号、健康、冷却、配额)构建准入模型集合,落选者附具名理由;按能力过滤并为每个节点分配模型,优先已付费订阅额度和免费额度,再考虑按量计费路由;在配额耗尽、限流、超时、空回答等故障时对路由或整个供应商做冷却,并把同一节点改派到其他准入模型;节点通过自身检查和归属检查,合并结果通过集成校验,再由未参与编写的评审者独立评审;结束时生成带事件日志 SHA-256 摘要的回执,可用 verdict run-receipt 重新计算校验,日志被改动会被发现;提供无凭证的离线演示和 dry-run quickstart。
适用场景
在多次调用多个 LLM 供应商的工作流中控制成本并按证据选择路由;需要为节点级 Agent 任务做故障转移和冷却恢复的编排场景;需要对运行结果生成可校验、防篡改回执的审计需求;需要在控制器重启后复用已验证节点继续推进的长任务;在无 API key 的前提下先通过离线演示了解编排流程。
项目形态
开发框架
部署方式
未说明(README 给出本地安装方式 git clone 与 pip install -e .,以及 uv sync --extra dev;执行依赖外部工具 OmniRoute、Prime Agent 和 ocr,未说明其部署与运行条件)
主要依赖
Python 3.10+;示例使用 pip 或 uv 安装;实时运行需通过 OmniRoute 网关接入各供应商(具体硬件、网络与账号要求未说明)
使用限制
本仓库只是控制平面,执行由外部工具 OmniRoute、Prime Agent、ocr 完成;根控制器故障转移由外部 supervisor 负责,裸启动控制器没有自动替换;节点无准入模型或尝试超过 4 次时会 FAIL_CLOSED 并 BLOCKED,不会无限重试;README 说明本地可复现的 proof 是单次运行,其中评审模型与控制器家族相同,恢复是 VM 重启后而非注入的控制器崩溃;fixture 数据无法满足实时证明;未说明 API 成本与配额限制细节。
许可证
MIT
最近推送
2026-09-30 06:46

资料检查:2026-09-30 07:00 · 卡片整理:2026-10-01 09:00
卡片由 AI 根据仓库资料整理,未进行安装或运行验证 · 本次更新未完成,保留上次成功内容

职业应用

程序员

程序员可将 Verdict 作为 LLM 编排与控制平面:输入目标和 git 仓库后,它把目标拆成 DAG 工作节点,从实时网关证据中构建准入模型集合,为每个节点分配最便宜且合格的路由,在配额、限流、超时或空回答等故障时进行同节点故障转移与冷却,并在节点验证、集成校验和独立评审后写入带 SHA-256 摘要的运行回执,用于代码编写、测试与排错工作流。

查看内容依据
Verdict plans a DAG, admits models from live evidence, runs parallel workers with same-node failover, verifies each node, runs an independent review, then writes a tamper-evident receipt.

官方使用入口 ↗

由 AI 根据来源材料整理,未进行安装或运行验证

这是基于来源内容整理的摘要。原文链接失效后,本页摘要和讨论仍会保留。

讨论 0

登录后参与讨论,阅读资讯无需注册。

还没有评论,来分享第一个看法。