AI 资源库 · 已整理 2 项

long-context

查看与long-context相关的 AI 资讯、工具、Skill、工作流和开源项目。

Gemini 4 Argon 对比 Claude Opus 5.5:价格减半,准确率也大致减半

谷歌在9月30日向小范围测试者发布 Gemini 4 Argon,10月13日向付费 Gemini API 开发者开放,并称其在18项测试中14项领先 Claude Opus 5.5,价格暂为后者一半(11月30日后涨回同价)。作者用三个难题实测:找 Bug 两者打平;账单规格题 Opus 全对,Argon 因一行小错几乎全挂,修掉后也全对;长上下文依赖题 Opus 基本找全33个受影响服务,Argon 各尺寸都答错一批且推理草率。可见 Argon 更便宜、有时够用,但复杂推理可靠性明显不如 Opus。

文中可用工具

  • Gemini 4 Argon谷歌新发布的大模型,文中为被测对象,已向付费 Gemini API 开发者开放
  • Claude Opus 5.5Anthropic 的对比模型,文中作为基准
  • OpenRouter用于调用两家模型运行测试的接口平台
  • Terminal-bench 4.0测试命令行中智能体工作的评测基准
☆ 收藏查看来源 ↗

Richardson Attention:面向混合注意力 Transformer 的免训练长上下文多跳推理与解码时注意力干预方法

tryggth/richardson-attention · Superconducting Spectral Attention: Zero-Shot 1-to-5 Hop Long-Context Extrapolation & Renormalization Group Relays for Hybrid Transformers (Gemma-4 2B & 4B)

Richardson Attention(又称 Superconducting Attention)是一种免训练、权重不变的运行时推理干预方法,用于缓解混合注意力 Transformer(如 google/gemma-4-E2B-it、gemma-4-E4B-it)在滑动窗口注意力与稀疏全局注意力交错结构下,多跳指针追踪退化为极低准确率的问题。README 报告称,该方法在 8,270 token 的 3 跳检索上把准确率从 0.0380% 提升到 98.5919%,在 9,912 token 的 5 跳链式追踪上从 2.2398% 提升到 93.8942%,并显著降低对抗性诱饵的捕获率,同时基本保持语言建模困惑度不变;在 NVIDIA RULER VT、BABILong qa3 和 Lost in the Middle 的评测中也报告了提升。项目包含论文、Colab 演示、评测脚本和结果文件,面向对长上下文推理与机制可解释性感兴趣的研究者。

☆ 收藏查看来源 ↗