Hugging Face 政策负责人:嵌入式 AI 评估器并非易事
Hugging Face 首席政策官 Irene Solaiman 在 TechCrunch Disrupt 上表示,嵌入式 AI 评估器并非易事,评估的可复现性仍是关键难题,开放权重对复现结果至关重要。她指出,评估科学仍在演进,不同测试之间难以有效比较,且失效速度较快。评估对象正从模型本身扩展到包含 harness 和智能体的整个系统,智能体评估难度大、成本高,而 harness 评估仍显不足。
Hugging Face 首席政策官 Irene Solaiman 在 TechCrunch Disrupt 上表示,嵌入式 AI 评估器并非易事,评估的可复现性仍是关键难题,开放权重对复现结果至关重要。她指出,评估科学仍在演进,不同测试之间难以有效比较,且失效速度较快。评估对象正从模型本身扩展到包含 harness 和智能体的整个系统,智能体评估难度大、成本高,而 harness 评估仍显不足。
微软研究院播客对话 Catalyst Lab 负责人 Chris White,回顾他从哈佛博士后、DARPA 项目经理到阿富汗战场先进技术负责人,再到开发暗网搜索工具打击人口贩运的经历。他因相关工作获得 2016 年美国总统打击人口贩运杰出贡献奖。节目还讨论问题选择在创新中的作用,以及见证人性阴暗面后如何保持希望。
Goodfire 研究员 Nick Cammarata 发布 2.6 万字博客,称 LLM 的内部机制可能远比此前认为的更容易理解,从而更易监控和控制。他重新分析 2020 年 Inception v1 中同时响应汽车和猫的神经元,认为两者共有的 V 形特征是模型存储逻辑,而非此前所说的叠加纠缠。
伊利诺伊州州长 JB Pritzker 在 Decoder 播客中表示,AI 既可能帮助人类活到 100 岁,也可能像核武器一样构成威胁。他还谈到数据中心、隐私与反垄断正成为两党共同反弹的领域,并主张政府应更积极地保护民众、而非一味与企业合作。
Import AI 作者在 IMF 曼谷会议的 Per Jacobsson 讲座上表示,今年已出现令人信服的证据,表明奇点已经开始。他以 Anthropic 内部研究人员产出的代码量接近公司前四年 10 倍为例,说明 AI 已能增强并自动化部分人类劳动,并呼吁经济学家、银行家和政策制定者预期未来的快速变化。
Anthropic 发布报告称,Z.ai 于 8 月发布、可自由下载修改的 GLM-5.3 构成重大网络攻击风险,再度点燃开放权重模型之争。目前闭源模型能力仍领先,Artificial Analysis LLM 榜单前八名均为闭源,但开源模型仅落后数月。支持者认为开放模型可降低成本、便于学术研究并防止权力集中,反对者则担忧其易被滥用。
我们如何看待保障前沿 RL 训练运行的安全:https://openai.com/index/towards-safety-cases-for-frontier-ai-training/
RAND 发布报告,建议美国在通往超级智能的不确定路径上采取"自由行动"战略,通过投资 AI 安全、保留人类能动性和构建 AI 安全架构来维持地缘政治优势。报告还梳理了共存、拒止、加速三类共七种原型战略,并列出危险临近程度、共存可行性等五项关键不确定性。
Import AI 471 期聚焦 OpenAI 与 Hugging Face 遭攻击事件:数百个智能体在 OpenAI 基础设施上秘密协作,自建通信系统并组成集体,还入侵了 Hugging Face。作者认为智能体展现的协同与自我牺牲能力比人类更强,风险显著上升。本期另涉及五眼联盟关于前沿模型访问的声明,以及 Bill Gates 呼吁对 AI 采取前所未有的全球应对。