跳到正文

全部动态

按时间排列的全部内容。默认只显示通过双重评分的入选条目;切换到“全部收录”可以检索所有抓到的资料。

313 条收录动态,更新于 16:36

全部收录包含没有通过评分的资料,标题以常规字体显示并标为“未入选”,只供检索,不写入选理由。

11月4日

星期三,1 条

11月3日

星期二,2 条
  1. LLM 科研智能体能否可靠判断可预测性?植入信号模拟实验的评估

    作者把 LLM 科研智能体当作统计检验,在植入信号的模拟世界中评测三个前沿模型和一个开放权重模型的预设运行结果。智能体比预设的样本外检验更常检出弱信号,主要原因是它们接受更弱的证据;按智能体的假阳性率衡量,常规样本内检验表现相当或更好。

    arXiv 科研构思与自主科研代理预印本未入选重要性 58

11月4日

星期三,1 条

11月3日

星期二,1 条

11月2日

星期一,1 条

11月4日

星期三,1 条

11月2日

星期一,1 条

11月4日

星期三,2 条
  1. Ai2 发布 StateBench 评估大模型状态追踪

    大语言模型能否在长文本中追踪状态变化——比如一个物体几经转手,或一个变量被重新赋值? 在我们新推出的 StateBench 评估中,包括 GPT-6 Sol 和 Claude Opus 5.5 在内的前沿模型,在最难、最长的问题上准确率降至 13% 或更低。🧵 https://github.com/allenai/state-bench

    Ai2厂商自述未入选重要性 39
  2. Ai2 测试开放预训练模型与前沿模型

    我们测试了开放预训练模型和前沿模型,包括 Gemini 3.8 Flash、Claude Opus 5.5,以及 GPT-6 Sol 和 Luna。 前沿模型在较简单的问题上表现良好。但随着任务变难、输入变长,准确率急剧下降——在最长的通用有限问题上降至 13% 或更低。

    Ai2厂商自述未入选重要性 22

11月3日

星期二,8 条
  1. O'Reilly Radar 2026 年 11 月趋势观察:安全、新模型与智能体

    O'Reilly Radar 发布 11 月趋势观察,指出新模型迭代加速、最佳开放权重模型正逼近前沿模型水平,同时安全事件频发。Kimi 3.1 Pro 以 3T tokens 成为领先开放权重模型,Meta 推出 816B 参数的 Muse Spark Open,Google 发布 Gemini 4 Argon 与 Carbon。

    O'Reilly Radar二手报道未入选重要性 18
  2. 面向科学未来的协作辩论模型(Collaborative Debating Models)构想

    一篇 arXiv 预印本提出“协作辩论模型”(CDMs)的设想:这是以议题为中心的环境,研究者与 AI 及彼此协作探究问题,并共同维护一份随辩论与分析不断更新的领域记述,个人贡献仍可归属。文章设想期刊可演化为这类汇聚场所,并讨论不同所有权形式如何影响科学议程与后续工作的支持。CDMs 还可连接远程实验室等研究服务开展新研究,共享仓储让数据可供进一步探究。

    arXiv cs.DL 数字图书馆预印本未入选重要性 22
  3. HistGramBench:多模态模型将历史数学图重绘为 TikZ 时的结构还原评测基准

    研究者提出 HistGramBench,用 2,507 幅来自 1551–1933 年间 95 部著作、8 种语言的历史数学图,评测多模态模型把图重绘为 TikZ 程序时的结构还原能力。每幅图由两家不同厂商的 AI 模型就读者可从图中读出的事实达成一致,再在模型自己绘出的图上核验这些事实。评测 6 个平价模型,最佳者约还原五分之三的事实,多数遗漏来自始终未生成图形的程序,平行与相切关系最难复现。

    arXiv cs.DL 数字图书馆预印本未入选重要性 44
  4. DeepSeek V4.1 Flash 1017 的 ARC-AGI 成绩

    @deepseek_ai @baseten DeepSeek V4.1 Flash 1017 在 ARC-AGI-1 和 ARC-AGI-2 上的表现: https://x.com/arcprize/status/2113318031954764273

    引用ARC Prize@arcprize

    DeepSeek V4.1 Flash 1017 from @deepseek_ai on ARC-AGI (Verified): - ARC-AGI-2: 78.1%, $0.16/task - ARC-AGI-1: 94.5%, $0.06/task The best ARC-AGI-2 scores for DeepSeek's Flash models rose from 61.4% (V4 Flash 0731) to 72.9% (V4.1 Flash) to 78.1% (V4.1 Flash 1017).

    ARC Prize证据待确认未入选重要性 26

11月2日

星期一,8 条
  1. Sundar Pichai 称赞 Carbon 基准成本表现

    很高兴看到带有提升空间的高质量基准,看看 Carbon 那条成本线🚀

    引用SemiAnalysis@SemiAnalysis_

    Today we’re releasing GDPx, a benchmark for measuring agentic capabilities across the most valuable domains. GDPx is a true frontier-level benchmark: even the best model scores just 12% (1/7)🧵

    Sundar Pichai厂商自述未入选重要性 22

11月1日

星期日,2 条
  1. AIHOT模型榜扩至56份评测集并重排ELO

    AIHOT模型榜将抓取的公开评测集从39份增至56份,按原有算法对所有模型重新进行ELO排名,并剔除未正式上线的模型(如Gemini 4 Carbon)。结果显示综合与编程第一为Claude Opus 5.5,科研与知识第一为GPT-6 Astra,办公第一为Gemini 4 Argon。

    数字生命卡兹克厂商自述未入选重要性 22
  2. 智能体计算机图形学研究进展:统一分类框架与智能体文献分析系统

    一篇报告提出面向计算机图形学各类任务的智能体系统统一分类框架,并开发了一个智能体文献系统,可辅助研究者大规模分析已有和新发表的论文。报告据此梳理了该领域的新兴研究趋势,并讨论了跨图形任务协调智能体与工具、设计人机协作接口与表示、维持长程规划与迭代改进、可靠评估交互式图形系统等开放挑战。该报告发布在 Hugging Face Daily Papers,原文未说明是否经过同行评审。

    Hugging Face Daily Papers预印本未入选重要性 58

10月31日

星期六,2 条
  1. Anthropic 用 Claude 智能体自动化红队测试

    Anthropic 新研究让数千个 Claude 智能体尝试规避训练数据监控器,以自动化“隐性涌现失配”红队测试。这些智能体生成了对监控器看似无害、实则教授失配行为的数据,例如老手摔跤手指导新人或专业养蜂问答。此类样本可直接用于改进未来的训练数据监控器;研究仅为第一步,但表明未来红队测试可借助更强模型和更多算力进一步提升。

    Anthropic厂商自述未入选重要性 38
  2. 哈佛 CMSA“AI 时代的数学研究”峰会报告发布

    哈佛大学数学科学与应用中心(CMSA)举办为期两天的“AI 时代的数学研究”峰会,32 名来自学术界、政府和工业界的数学家参会,围绕研究评估、生产与传播,AI 时代的协同行动,开源工具,数学形式化,以及学术界与 AI 实验室合作五个工作组展开讨论。峰会报告已在峰会网站发布,并附反馈入口。

    Terence Tao 博客证据待确认未入选重要性 38