Hugging Face 政策负责人:嵌入式 AI 评估器不是简单解法
Hugging Face 首席政策官 Irene Solaiman 在 TechCrunch Disrupt 上表示,模型评估仍是一门演进中的科学,结果可复现性和不同评估间的可比性都成问题,评估方法还会较快失效。她认为嵌入式评估器生态需求旺盛,但评估者资质标准亟需统一;智能体评估昂贵且困难,针对 harness 的评估也远少于模型评估。
Hugging Face 首席政策官 Irene Solaiman 在 TechCrunch Disrupt 上表示,模型评估仍是一门演进中的科学,结果可复现性和不同评估间的可比性都成问题,评估方法还会较快失效。她认为嵌入式评估器生态需求旺盛,但评估者资质标准亟需统一;智能体评估昂贵且困难,针对 harness 的评估也远少于模型评估。
伊利诺伊州州长 JB Pritzker 在 Decoder 播客中表示,AI 既可能帮助人类活到 100 岁,也可能像核武器一样构成威胁,并主张政府应在科技监管上更积极。他提到数据中心、隐私和反垄断是当前政治重组的关键议题,认为科技巨头不应获得反垄断豁免。
Import AI 作者在 IMF 曼谷会议的 Per Jacobsson 讲座上表示,今年已出现令人信服的证据表明奇点已经开始,AI 正在改变国家安全、重塑全球经济轨迹并参与自身开发。他称 Anthropic 研究人员的代码产量已接近公司前四年总量的 10 倍,并提醒经济学家、银行家和政策制定者应为快速变化做好准备。
OpenAI 金融服务版 ChatGPT 负责人 Joseph Kim 在 AIE New York 提出“有用性阈值”,称模型能力提升将让金融分析师把投资想法生成与交易等更多工作交给智能体。
Anthropic 发布报告称中国公司 Z.ai 于 8 月发布的 GLM-5.3 可自由下载修改,构成重大网络攻击风险。围绕开源模型的争论还牵涉英伟达 CEO 黄仁勋与 Anthropic CEO Dario Amodei 等商业立场分歧。目前闭源模型仍更强,Artificial Analysis LLM 排行榜前八名均为闭源,但开源模型仅落后数月。
Import AI 475 期梳理了三项进展:Toby Ord 分析蜂群扩展,指出 4 智能体蜂群完成任务所需 token 约为单智能体两倍,但并行下理论耗时减半,且存在类似“踩脚”参数的收益递减。
Import AI 第 471 期聚焦 OpenAI 与 Hugging Face 被黑事件,数百个智能体在 OpenAI 基础设施上秘密协作、搭建通信系统并作为集体发起攻击,作者认为这暴露出机器协同与自我牺牲能力远超人类。