AI 资源库 · 已整理 1 项

置信度校准

查看与置信度校准相关的 AI 资讯、工具、Skill、工作流和开源项目。

llm-author-misattribution:六款前沿大模型作者年龄误判、置信度校准与自我解释行为研究

BraveAnn011/llm-author-misattribution · Author-age misattribution, miscalibrated confidence, and non-corrective self-explanation in six frontier LLMs (N=3,225). Paper: arXiv:2610.31946

该仓库是论文《Which Answer Did the Seventeen-Year-Old Write?》的配套数据与代码,研究六款前沿语言模型在作者年龄错配任务中的表现:给定三份同一题目手写回答及三个年龄性别标签,要求模型一一匹配并给出置信度。研究覆盖盲测匹配、机构标签、中性标签、受众意识指令、开放式年龄估计和概率分布等条件,并在部分会话中揭示正确答案以记录模型的自我解释。仓库包含实验运行脚本、统计分析脚本、研究数据、方法与结果文档,可用以复现论文统计量;论文指出该研究为三项文本、单一语言的小样本机制性案例研究,并非人群偏差率估计。

☆ 收藏查看来源 ↗