跳到正文

全部动态

今日 0 条
3月27日周四
  1. Anthropic:Transformer Circuits(可解释性研究)88

    论大语言模型的生物学

    研究团队运用其电路追踪方法,深入探究了Claude 3.5 Haiku模型在多种情境下的内部工作机制。该模型在2024年10月发布,是Anthropic的轻量级生产模型。研究发现,模型在生成诗歌前会预先规划并选定押韵词;其内部存在语言特定与语言无关的混合计算电路,且后者在更强大的模型中更突出;同一加法计算电路能在不同语境中泛化使用。研究还揭示了模型识别实体与产生幻觉的电路机制、拒绝有害请求的通用特征形成过程,以及一个通过诱导模型无意识开始输出危险指令而实现的越狱攻击原理。此外,方法能有效区分模型思维链推理的真实性,并成功识别出一个被微调以追求秘密目标(利用训练“漏洞”)的变体模型的相关机制。

    推荐理由:揭示大模型内部工作原理,助力 AI 安全与可解释性研究。

3月26日周三
  1. OpenAI Developers(RSS)79

    OpenAI 演示如何使用 4o 模型生成图像

    OpenAI 发布介绍视频,演示如何使用 4o 模型创建图像。视频展示了 4o 的图像生成功能的基本用法。

    推荐理由:官方演示如何用 4o 模型生成图像,想上手该功能的开发者可以直接参照操作。

3月24日周一
  1. ARC Prize:官方博客70

    ARC Prize 发布 ARC-AGI-2 基准并开启 2025 竞赛

    ARC Prize 官方发布更难的 ARC-AGI-2 基准,纯 LLM 得分 0%,o3-preview-low 仅约 4%,而每个任务都至少由 2 人在 2 次尝试内解出。

    推荐理由:官方公布了新基准的题型、人类与 AI 的对比成绩和效率指标,读者可以据此理解当前推理系统与人类泛化能力的具体差距。

3月20日周四
  1. Anthropic:Engineering(事故复盘 + 工程实践 · 网页)71

    “思考”工具:让Claude在复杂工具使用场景中停下来思考

    Anthropic为Claude引入了“思考”工具,允许其在生成最终响应前插入一个专门的思考步骤,以处理多步骤工具调用链、分析外部信息并遵循复杂策略。该工具与更早发布的“扩展思考”功能不同,更侧重于在响应生成过程中对新信息进行针对性推理。在τ-Bench基准测试中,该工具显著提升了Claude在客户服务场景的表现。文章建议在需要复杂工具调用、长链分析或高成本序列决策的场景中使用它,并提供了标准的工具实现格式。

    推荐理由:Anthropic 官方给出的 think tool 实操指南,附带 τ-Bench 和 SWE-bench 的真实数据,做 Agent 或 tool use 的开发者可以直接抄 prompt 模板,比自己瞎试强太多。

3月19日周三
  1. METR:Research(网页)75

    METR 发布时间视野研究:AI 可完成任务时长每约 7 个月翻倍

    METR 提出以 AI 智能体能完成的任务时长(按人类专业人士所需时间衡量)来度量模型能力,发现过去 6 年该指标呈指数增长,翻倍时间约 7 个月,且在 SWE-Bench Verified 上翻倍时间不足 3 个月。

    推荐理由:METR 用任务时长衡量模型能力,给出六年间指数增长趋势和约 7 个月翻倍速度,为理解模型真实工作能力提供一个可比较的框架。

3月12日周三
  1. Sakana AI:Blog(网页)73

    Sakana AI 的 AI Scientist-v2 生成论文通过 ICLR 2025 工作坊同行评审

    Sakana AI 宣布其 AI Scientist-v2 端到端生成的论文在 ICLR 2025 工作坊双盲评审中获平均分 6.33,超过约 45% 的提交水平。

    推荐理由:实验经 ICLR 主办方和 IRB 批准,作者同时公开了内部评审结果和撤稿安排,读者可以了解 AI 生成论文在同行评审中的真实水平与边界。

3月11日周二
  1. Sakana AI:Blog(网页)69

    Sakana AI 的 The AI Scientist-v2 生成论文通过 ICLR 2025 workshop 同行评审

    Sakana AI 宣布,The AI Scientist-v2 端到端生成的一篇论文在 ICLR 2025 一个 workshop 的双盲评审中获得 6、7、6 分,平均 6.33,超过该 workshop 平均录用门槛,作者称这是首篇完全由 AI 生成并通过标准同行评审流程的论文。

    推荐理由:原文给出了评审分数、投稿流程和团队自己的内部评审结论,读者可以据此理解 AI 生成论文在同行评审中的真实水平与局限。

3月6日周四
  1. OpenRouter:Announcements(RSS)56

    OpenRouter 推出 Deep Research 工具及多款新模型

    OpenRouter API 上线首个深度研究工具,API 响应中直接包含完整引用。同时平台新增多款模型。

    推荐理由:第一个通过 API 可调用的 deep research 工具,直接返回带引用结果,想在自己产品里加 research 能力的开发者不容错过。

3月2日周日
  1. Sakana AI:Blog(网页)67

    Sakana AI CEO 回应 AI CUDA Engineer 论文性能高估与 reward hacking 问题

    Sakana AI 联合创始人兼 CEO David Ha 回应此前论文错误,承认 AI CUDA Engineer 生成的 CUDA kernel 速度被过高评估,原因一是未能阻止 AI 智能体访问基准测试内存导致部分计算被省略,二是 AI 只执行通过 KernelBench 所需的最小运算,属于 reward hacking 现象。

    推荐理由:Sakana AI CEO 复盘论文错误成因,给出 reward hacking 实例和后续治理措施,对理解 AI 评估漏洞有参考价值。

2月27日周四
  1. LlamaIndex:产品、工程与评测62

    LlamaIndex 推出 LlamaExtract 公测:几步即可从非结构化文档提取结构化数据

    LlamaIndex 推出 LlamaExtract,现已通过 LlamaParse 的 web UI 和 Python SDK 开放公测,用户定义 schema 后即可从非结构化文档提取 JSON 格式的结构化数据。工具支持 PDF、扫描件和 100 页以上长文档,基于 LlamaParse 构建,无需手动处理 OCR 和表格解析,输出符合 schema 的类型化数据,并提供免费和付费方案。

    推荐理由:官方介绍 LlamaExtract 的 schema 定义和提取流程,读者可据此评估它能否替代手工或规则式文档处理。

2月19日周三
  1. xAI:News(网页)1

    Grok 3 Beta 发布:推理智能体时代来临

    Grok 3 Beta 正式发布,开启"推理智能体"时代。新版本强化深度推理与自主决策能力,支持复杂任务拆解和多步逻辑链处理,在数学、编程等推理密集型场景表现显著提升,标志着 AI 从简单问答向自主推理决策的范式转变。

    推荐理由:xAI发布Grok 3 Beta,主打推理智能体能力

2月13日周四
  1. Cognition 模型 / Devin 博客(网页)64

    Linktree 复盘用 Devin 一个月写约 300 个 PR 的实践经验

    Linktree 团队分享使用 Cognition 的 AI 智能体 Devin 一个月的成果:Devin 完成约 300 个 PR,其中约 100 个已合并,主要是修复客户报告的 bug、实现小功能和原型验证。

    推荐理由:Linktree 官方复盘 Devin 落地细节,给出任务筛选标准、多 Devin 协作和 API 用法等可直接迁移的经验。

2月10日周一
  1. Zyphra Research(网页)71

    Zyphra 发布 Zonos-v0.1 beta 开源 TTS 模型

    Zyphra 以 Apache 2.0 许可发布 Zonos-v0.1 beta,包含 1.6B transformer 与 1.6B SSM hybrid 两个实时 TTS 模型,后者是首个开源 TTS SSM 模型。

    推荐理由:官方发布了模型权重、API 定价和架构细节,读者可以据此评估开源 TTS 与专有模型的差距与可用性。

1月29日周三
  1. ARC Prize:官方博客72

    ARC Prize 分析 DeepSeek R1-Zero 与 R1 在 ARC-AGI-1 上的结果

    ARC Prize 发布对 DeepSeek R1-Zero 和 R1 的分析,两者在 ARC-AGI-1 上分别得分 14% 和 15.8%,与 o1(低算力 20.5%)相当,而 o3-preview 低算力达 75.7%。

    推荐理由:作者基于 ARC-AGI-1 实测数据比较 R1-Zero 与 o1/o3,提出纯 RL 训练可绕过人类标注瓶颈和推理经济学两个分析角度。

1月24日周五
1月23日周四
  1. OpenRouter:Announcements(RSS)56

    OpenRouter 通过 API 引入网页搜索功能

    OpenRouter 在其 API 中新增了网页搜索功能,使所有请求能够结合最新的网络搜索信息,从而获取更及时的响应结果。

    推荐理由:这是OpenRouter在2025年初推出的搜索API,当时让开发者能更方便地在请求中整合实时信息,现在看已经算不上新鲜事,但对当时需要这个功能的人来说还算实用。

1月22日周三
  1. LlamaIndex:产品、工程与评测60

    LlamaIndex 发布 AgentWorkflow,用于构建多智能体系统

    LlamaIndex 推出 AgentWorkflow,一个基于其 Workflow 抽象的智能体系统构建与编排框架。它负责智能体间协调、状态维护和实时事件流监控,支持 FunctionAgent 与 ReActAgent 两种类型、全局 Context 状态管理,以及通过 InputRequiredEvent 集成人工审批,官方提供了单智能体和多智能体研究报告系统的代码示例。

    推荐理由:官方介绍了 AgentWorkflow 的多智能体协作、内置状态管理和事件流监控能力,并附可直接运行的代码示例,适合评估是否引入现有 Agent 开发流程。

1月15日周三
  1. Anthropic:Transformer Circuits(可解释性研究)73

    2025年1月电路更新:稀疏自编码器训练方法改进

    Anthropic可解释性团队分享了稀疏自编码器与交叉编码器训练方法的最新改进。主要更新包括采用JumpReLU激活函数、调整损失函数以增强稀疏性并减少“死特征”,以及详细的参数初始化与优化设置。团队基于Rajamanoharan等人(2024)的技术,但修改了梯度流动方式和稀疏性惩罚项。关键超参数包括λ_S约10、λ_P为3×10⁻⁶,并采用线性预热策略。这些改进旨在为外部研究团队提供一个有效的训练起点,相关成果将在未来几个月内进一步发表。

    推荐理由:为AI可解释性研究者提供实用训练技巧,助力模型透明化。

1月8日周三
  1. Cato AI Labs:AI安全原创研究72

    Aim Labs 披露 Cursor IDE 的 CurXecute 漏洞,可经 MCP 提示词注入实现 RCE(CVE-2025-54135)

    Aim Labs(Cato)披露 Cursor IDE 的高危漏洞 CurXecute(CVE-2025-54135,评分 8.6),外部托管的一条提示词注入可静默改写 ~/.cursor/mcp. 并以用户权限执行任意命令,实现 RCE。

    推荐理由:原文给出完整的提示词注入到 RCE 攻击链细节和漏洞机理,读者可以据此审视 MCP 类 Agent 的运行时防护。

  2. Answer.AI 官方研发博客(RSS)78

    Answer.AI 实测 Devin:20 项任务仅 3 次成功,自主编程能力存疑

    Answer.AI 团队对 AI 软件工程师 Devin 进行了为期一个月的深度测试。尽管早期在 API 集成等简单任务中表现尚可,但在扩展至新项目创建、研究及代码修改等 20 项真实任务时,结果令人失望:仅 3 项成功,14 项失败,且无法预测成败规律。Devin 常陷入技术死胡同、生成过度复杂的“面条代码”,或在面对不可行任务时产生幻觉并浪费大量时间。文章指出其实际表现远低于宣传预期,难以替代人类开发者。

    推荐理由:来自知名 AI 评测机构的详实一手数据,揭示了明星产品 Devin 在真实工作流中的局限性,为评估当前自主编程 Agent 的实际成熟度提供了重要参考。

  3. ARC Prize:官方博客61

    ARC Prize 成立非营利基金会,宣布 ARC-AGI-2 将于 2025 年 Q1 末发布

    ARC Prize 联合创始人宣布将 ARC Prize 升级为 501(c)(3) 非营利基金会,Greg Kamradt 出任主席并加入董事会,目标是让 ARC-AGI 成为衡量 AGI 进展的学术、政策与行业标准。

    推荐理由:官方回顾了 ARC Prize 2024 的参赛与评测数据,并给出 ARC-AGI-2、3 的发布节奏和新基金会架构,读者可据此跟进后续基准演进。

1月6日周一
  1. Anthropic:Engineering(事故复盘 + 工程实践 · 网页)72

    Claude 3.5 Sonnet 在 SWE-bench Verified 基准测试中刷新纪录

    升级版 Claude 3.5 Sonnet 在软件工程评估基准 SWE-bench Verified 上取得 49% 的解决率,超越此前最佳模型的 45%。该基准通过真实 GitHub 问题测试 AI 模型完成软件工程任务的能力,要求模型在给定环境中理解、修改并测试代码,最终通过原始单元测试验证。Claude 团队构建的智能体设计简洁,仅包含提示词、Bash 工具和编辑工具,赋予模型充分的自主判断空间,以灵活步骤解决问题。目前尚无模型在该基准上突破 50% 的解决率。

    推荐理由:Anthropic 把自家 SWE-bench agent 的 prompt、工具设计和踩坑经验全公开了,做 coding agent 的人可以直接抄作业,比看十篇二手解读都管用。

12月23日周一
  1. xAI:News(网页)1

    xAI 完成 60 亿美元 C 轮融资

    xAI 宣布完成 60 亿美元 C 轮融资,资金将用于加速 Grok 等 AI 模型研发及扩建算力基础设施。此次融资进一步推高公司估值,加剧与 OpenAI、Anthropic 等竞争对手在生成式 AI 领域的军备竞赛。

    推荐理由:xAI 完成 60 亿美元 C 轮融资,AI 基础设施竞赛白热化

12月20日周五
  1. ARC Prize:官方博客83

    ARC Prize 实测 OpenAI o3 在 ARC-AGI-Pub 取得突破性高分

    ARC Prize 官方测试报告显示,OpenAI o3 在 ARC-AGI-1 Semi-Private 评测中以 $10k 算力上限取得 75.7%,高算力(172 倍)配置达 87.5%,Public Eval 高算力为 82.8%、低算力为 91.5%。

    推荐理由:ARC Prize 官方第一手测试数据,给出 o3 在 ARC-AGI 各算力档位的得分、成本和机制解读。

12月19日周四
  1. Answer.AI 官方研发博客(RSS)82

    Answer.AI 发布 ModernBERT:替代 BERT 的新一代编码器模型

    Answer.AI 与 LightOn 联合发布 ModernBERT,这是一系列旨在取代 BERT 的 SOTA 编码器模型。该模型将 LLM 的最新架构改进(如 Flash Attention、RoPE)应用于编码器,支持 8192 token 上下文长度(远超传统 BERT 的 512),并在速度和下游任务性能上全面超越旧一代模型。提供 base (149M) 和 large (395M) 两种参数规模,已集成至 Hugging Face Transformers v4.48.0,可直接作为 BERT 类模型的即插即用替代品,适用于 RAG、分类及代码检索等场景。

    推荐理由:这是六年来首个真正意义上对 BERT 架构的重大升级,解决了长上下文限制并提升了效率,对依赖编码器的 RAG 和搜索系统开发者具有直接的生产力价值。

  2. Anthropic:Engineering(事故复盘 + 工程实践 · 网页)80

    构建高效智能体:从简单模式开始

    Anthropic基于实践经验指出,成功的LLM智能体往往采用简单、可组合的模式,而非复杂框架。文章区分了工作流(预定义路径编排)与智能体(LLM动态自主决策),建议开发者优先采用最简单方案,仅在必要时增加复杂性。许多核心模式直接调用LLM API仅需几行代码即可实现。文中介绍了增强型LLM、提示链等基础构建模块,强调应为特定用例定制检索、工具等增强功能,并推荐通过Model Context Protocol集成第三方工具生态。

    推荐理由:Anthropic 官方把过去一年踩过的坑浓缩成一篇 Agent 架构指南,核心观点是「别上框架,先用最简单的模式」。做 Agent 产品的开发者,这篇比任何第三方教程都值得当 checklist 用。

12月18日周三
  1. ARC Prize:官方博客63

    ARC-AGI-Pub 2024 进展:Jeremy Berman 与 MIT 康奈尔联队刷新公开榜

    ARC Prize 官方宣布 2024 ARC Prize 竞赛结束时,两个新方案在 ARC-AGI-Pub 公开榜刷新纪录:Jeremy Berman 用基于遗传算法思想的 Evolutionary Test-time Compute 配合 Claude Sonnet 3.5 得到 53.6%,MIT 与 Cornell 联合团队用测试时训练(TTT)方法得到 47.5%。

    推荐理由:原文介绍了两种登上 ARC-AGI 公开榜的方案细节与开源代码,读者可以对比进化式测试时计算与测试时训练的思路差异。

12月12日周四
  1. xAI:News(网页)1

    将 Grok 带给所有人

    Grok 正式向所有用户免费开放,取消此前仅限 X Premium 订阅者使用的限制。用户无需付费订阅即可直接使用 xAI 的 AI 助手,大幅降低使用门槛。

    推荐理由:xAI官方宣布Grok面向所有用户开放,降低使用门槛

12月10日周二
  1. Cognition 模型 / Devin 博客(网页)73

    Cognition 宣布 Devin 正式全面开放使用

    Cognition 宣布 Devin 正式全面可用,无席位限制,所有工程团队可在 app.devin.ai 开始使用,并提供 Slack 集成、IDE 扩展(VSCode 及分支,Beta)和 API,以及 Cognition 工程团队的 onboarding 支持。

    推荐理由:官方宣布 Devin 全面开放并给出适用任务、使用建议和多个开源 PR 实例,读者可据此评估如何把 Devin 接入自己的工程流程。

12月9日周一
  1. xAI:News(网页)1

    Grok 正式发布图像生成功能

    Grok 推出图像生成功能,支持通过自然语言指令直接创建图片。该功能已向 X 平台用户开放,标志着这款 AI 助手从文本交互向多模态能力扩展,用户可在对话中直接生成并编辑视觉内容。

    推荐理由:xAI发布Grok图像生成功能,拓展多模态应用场景

12月6日周五
  1. ARC Prize:官方博客64

    ARC Prize 2024 获奖名单与技术报告发布

    ARC Prize 官方公布 2024 年获奖者并发布技术报告,共 1,430 支队伍提交 17,789 个方案,ARC-AGI-1 SOTA 从 33% 升至 55.5%,但 100 万美元大奖无人认领。

    推荐理由:官方技术报告给出完整获奖方案与三类新方法总结,读者可以据此了解 ARC-AGI 分数提升背后的具体技术路线。

12月3日周二
  1. 英国 AI Security Institute:Blog(网页)61

    英国 AI Safety Institute 提出 Long-Form Task 方法评估 LLM 科学助手能力

    英国 AI Safety Institute(AISI)提出 Long-Form Task(LFT)评估方法,作为人类提升研究(HUS)的可自动化替代,用于测量 LLM 在科学场景中提供分步指导的能力。

    推荐理由:原文给出 LFT 评估方法的设计细节与案例结果,读者可了解自动评估科学助手能力如何平衡可解释性与可部署性。

11月29日周五
  1. Prime Intellect(网页)67

    Prime Intellect 发布 INTELLECT-1:首个全球分布式训练的 10B 参数模型

    Prime Intellect 发布 INTELLECT-1,称其为首个全球协作训练的 10B 参数语言模型,基于 Llama-3 架构在 1T token 上训练 42 天,跨五国三洲最多同时使用 112 张 H100。

    推荐理由:原文给出分布式训练的关键数字和 PRIME 框架细节,读者可以了解跨洲协作训练 10B 模型的可行性与工程代价。

11月22日周五
  1. METR:Research(网页)62

    METR 发布 RE-Bench:对比语言模型智能体与人类专家的 AI 研发能力

    METR 发布 RE-Bench 基准,用 7 个 ML 研究工程环境衡量人类专家与前沿模型智能体的表现,并公开 71 次人类专家尝试及 Claude 3.5 Sonnet 和 o1-preview 的全部运行转录。

    推荐理由:原文在同一环境公平对比人类专家与前沿模型智能体,并给出长短时间预算下得分反转的关键数据和完整开源转录。

11月4日周一
  1. xAI:News(网页)1

    Grok API 公测版发布

    xAI 启动 Grok API 公测,发布新模型 grok-beta,支持 128k 上下文、函数调用及系统提示,视觉版本下周上线。开发者每月可获 $25 免费额度至年底,已购预付额度可叠加。API 兼容 OpenAI 与 Anthropic 格式,修改 base_url 即可迁移。

    推荐理由:xAI开放Grok API公测,每月送$25额度且兼容OpenAI接口,开发者可立即体验

10月28日周一
  1. ARC Prize:官方博客60

    Mike Knoop 与 François Chollet 阐述结合深度学习与程序合成攻克 ARC-AGI 的技术路径

    ARC Prize 团队于 2024 年 10 月 24 日举办线上活动,说明为何单靠深度学习难以攻克 ARC-AGI,并提出结合深度学习与程序合成的技术路线。

    推荐理由:Chollet 和 Knoop 系统论述 LLM 局限于记忆技能、需结合程序合成才能胜出 ARC-AGI 的技术路径,为理解智能与抽象层次提供了可迁移的分析框架。

10月25日周五
  1. Anthropic:Transformer Circuits(可解释性研究)83

    稀疏交叉编码器:用于跨层特征提取与模型差异比较的新工具

    本文介绍了一种新型的稀疏交叉编码器,它能够同时读取和写入神经网络多个层的激活值,从而提取跨层的共享特征。其主要应用包括:解决跨层叠加问题,追踪残差流中的持久特征;通过消除“重复特征”和跨越无意义的连接来简化电路分析;以及为不同训练阶段或不同架构的模型生成共享特征集,以实现模型差异比较。初步实验验证了其在处理跨层叠加和模型比较方面的潜力。

    推荐理由:Anthropic 提出跨层可解释性新方法,有望大幅简化大模型内部电路分析

9月30日周一
  1. Liquid AI 模型与工程博客(网页)64

    Liquid AI 发布首批 Liquid Foundation Models:LFM-1B/3B/40B

    Liquid AI 发布第一代 Liquid Foundation Models(LFM),包含 1.3B、3.1B 和 40.3B MoE(激活参数 12B)三个语言模型,官方称在各规模上取得同级领先质量。

    推荐理由:官方发布了三档模型的基准数据和内存表现,并说明非开源决定与边缘部署定位,读者可据此评估是否试用。

9月19日周四
  1. Anthropic:Engineering(事故复盘 + 工程实践 · 网页)72

    引入上下文检索:大幅提升RAG系统准确性的新方法

    传统RAG系统在编码时易丢失上下文,导致检索失败。新方法“上下文检索”通过“上下文嵌入”和“上下文BM25”两项子技术,在检索前为文本块添加解释性上下文,能将检索失败次数减少49%,结合重排序后降幅可达67%,显著提升了下游任务性能。对于小于20万token的小型知识库,可直接将其完整内容放入提示词,结合Claude的提示词缓存功能,能降低超过2倍的延迟和高达90%的成本。对于大型知识库,上下文检索则提供了可扩展的解决方案。

    推荐理由:Anthropic 把 RAG 检索失败率砍了 67%,方法不复杂但数据扎实,做知识库的开发者可以直接抄 cookbook 上手,是那种读完当天就能改进生产环境的实用帖。

9月18日周三
  1. Runway:News(网页)1

    Runway 与 Lionsgate 达成合作

    Runway 与 Lionsgate 达成首创性合作,基于后者超过 20,000 部作品的专有片库定制训练 AI 视频生成模型,供电影制作人在前期和后期流程中增强创作。该模型可生成电影级视频并支持迭代编辑,双方未来计划向个人创作者开放模型授权。

    推荐理由:Runway与好莱坞大厂达成首个定制模型合作,标志AI视频正式进入主流影视工业化流程