评测与安全工具
fin-doctor:在 AI 财务问答交付前核查 IRS 与 SSA 金额事实
vishalhabib99/fin-doctor · Checks the money facts in AI agents' answers before customers see them: stale or wrong IRS and SSA figures flagged with the right figure and its source. MCP server + Python.
ELI5:它是什么,解决什么问题
fin-doctor 是一个面向金融 AI 智能体的事实核查工具,用 MCP 服务器 + Python 实现:它把草稿答案中的 IRS/SSA 官方数字(如 401(k)、IRA、HSA 限额、RMD 年龄、社保应税上限)与带年份和来源的注册表比对,标记过时、错年或错误数字,并给出正确数值与来源链接。它还提供贡献额度计算工具和退休问答审校(事实、投资建议、承诺性表述、范围外、提示注入检测),输出 SEND/REVIEW 判定。项目为参考性构建,未说明生产部署情况。
核心能力与快速开始
★ 1 · Python
- 能做什么
- 对 AI 智能体草稿答案中的官方财务数字进行核查:每个数字得到 match/stale/wrong_year/wrong/unknown_year/unverified 状态,并附正确数值与 IRS/SSA 来源;覆盖退休账户、HSA、社保与联邦税共 64 个数字(2025–2027 不等)。以 MCP 服务器形式提供 check_answer、get_facts、contribution_room 工具;gate 接口可在答案交付前返回 send/fixed/review。退休问答审校用规则 + fact-judge + advice-judge 检测错误事实、个人建议、承诺性表述、超范围、空答案和提示注入。另含浏览器端贡献额度计算页。
- 适用场景
- 在银行机器人、机器人投顾、税务或 HR 助手等金融 AI 场景中,作为交付前的事实核查闸门,拦截过时的年度限额和错误规则数字;给 MCP 客户端(如 Claude Code)挂载只读核查工具;用 contribution_room 计算当年 401(k)/IRA/Roth 剩余额度;在受监管机构中作为模型风险治理与评测的参考实现。
- 项目形态
- 可直接使用的工具
- 部署方式
- 未说明;README 给出 uvx 免安装运行与 claude mcp add 注册 MCP 服务器的方式,浏览器计算页为静态页面。未说明生产部署架构与托管条件。
- 主要依赖
- 未说明;快速开始需要 uv。judge 层涉及模型调用,具体模型与 API 成本未说明。
- 使用限制
- 仅核查官方数字与特定规则,不判断客户金额或算术;PASS 只表示未发现已知数字错误,不代表整段答案正确。注册表需每年 11 月随 IRS 发布更新,缺失年份按未知处理并转 REVIEW。评估基于合成答案(如第五组 55 个错误数字捕获 45 个),仓库自述召回率约 82% 是未解决问题,且评测者与出题者为同一模型家族,可能存在共同盲点;未测试经检索文档的提示注入。作者声明不构成财务或税务建议,与金融机构无关联。
- 许可证
- MIT
- 最近推送
- 2026-10-18 09:03
资料检查:2026-10-19 07:00 · 卡片整理:2026-10-19 07:00
卡片由 AI 根据仓库资料整理,未进行安装或运行验证
职业应用
程序员
在开发金融类 AI 智能体时,可将 fin-doctor 作为 MCP 服务器接入(如 Claude Code),在草稿答案交付前调用 check_answer / gate 对 IRS、SSA 官方金额进行事实核查,并返回 SEND/REVIEW 判定;也可用 contribution_room 工具做确定性的额度计算。
查看内容依据
claude mcp add fin-doctor -- uvx --from git+https://github.com/vishalhabib99/fin-doctor fin-doctor-mcp
由 AI 根据来源材料整理,未进行安装或运行验证
产品经理
作为 AI 产品经理的参考构建,可借鉴其从 PRD、评测计划到盲测、发布门禁的流程,以及模型风险包(清单、模型卡、验证报告、监控计划)来设计金融 AI 答案的事实核查与上线治理方案。
查看内容依据
Reference build by an AI product manager: [PRD](PRD.md) → [eval plan](EVAL_PLAN.md) → build → blind evals → release gate.
由 AI 根据来源材料整理,未进行安装或运行验证
讨论 0
登录后参与讨论,阅读资讯无需注册。
还没有评论,来分享第一个看法。