HumanStudy-Bench:面向 AI 智能体评估的人类被试实验标准化回放基准
HumanStudy-Hub/HumanStudy-Bench · HumanStudy-Bench: Community Edition — Standardized human study replays for AI agent evaluation
HumanStudy-Bench 是一个标准化测试平台,用于让 AI 智能体回放人类被试实验。它由三部分构成:按已发表实验协议进行重建的执行引擎、一个持续扩充的可运行社会科学研究集合,以及从行为、效应和科学结论层面进行的评估。初始收录 12 项研究,覆盖认知、策略互动和社会心理学。项目提供直接提交 PR 的贡献路径(复制现有 study 目录结构、本地验证脚本、提交 PR),另有处于升级中的 HumanStudy-Hub 平台自动建研究路径。仓库结构包含 studies、src、playground、agent_pipeline、generation_pipeline、scripts、docs 和 tests。
评论 · 分享第一个看法