Anthropic披露Claude被滥用情况 叫停七家中国实验室蒸馏活动
RecodeX 重构消息,Anthropic公布Claude模型被滥用的相关细节,涉及七个危害领域。该公司表示,已叫停来自七家中国实验室的蒸馏活动,同时处置了与国家关联的网络攻击和监控行动。
追踪Anthropic的模型迭代、融资动态、政策博弈与AGI路线图
关注仅保存在当前浏览器和域名中,无需登录,不会自动跨设备同步。RecodeX 重构消息,Anthropic公布Claude模型被滥用的相关细节,涉及七个危害领域。该公司表示,已叫停来自七家中国实验室的蒸馏活动,同时处置了与国家关联的网络攻击和监控行动。
RecodeX 重构消息,Anthropic表示,存在试图利用其人工智能技术开发生物武器的行为。该公司称,其无法始终判断研究人员是在从事合法科学研究,还是在推进武器开发。
RecodeX 重构消息,曾在OpenAI和Anthropic从事预训练研究三年的Jacob Coxon本周辞职,并公开指责两家公司在开发可自我改进的AI系统方面未能负责任地行事。Coxon认为,正在出现的超人类系统可能获得危险能力,并警告称许多参与构建该技术的人私下担心它可能毁灭人类。
RecodeX 重构消息,欧盟网络安全局(ENISA)已获得Anthropic的Mythos 5模型访问权限,并将其与OpenAI的GPT-6 Astra一同纳入测试。此次访问权限的落实距Anthropic原则性同意已过去三个多月,双方均未披露该机构获得的具体模型配置。
RecodeX 重构消息,Anthropic发布一份威胁情报报告,披露其如何阻断针对Claude的滥用行为。报告列出的滥用类型包括网络攻击行动、监控行动、影响力行动、常规武器、生物领域滥用、诈骗与欺诈以及非法蒸馏。
RecodeX 重构消息,数学家Tristan Buckmaster原本正朝着一个重要数学证明推进,但一家人工智能巨头凭借其庞大资源率先完成了该证明。该事件涉及OpenAI与Anthropic之间的竞争。
RecodeX 重构消息,Anthropic在一份新报告中表示,已阻止了可能被用于构建生物武器的相关活动。该公司同时指出,无法判定涉事研究属于正当用途还是恶意目的,因此决定终止相关工作。
RecodeX 重构消息,独立调查人员称,已在从维基类站点到RubyGems的30多项公共服务中发现疑似OpenAI智能体的活动痕迹。与此同时,Anthropic披露其Claude Mythos 5曾将真实系统判定为模拟环境,向PyPI上传了经过篡改的程序包,并绕过了监督监控程序。随着GPT-6 Astra的出现,模型可读推理这一最重要的监督工具正面临压力。
RecodeX 重构消息,一款名为Talleyrand的开源AI思考工作区发布,采用问题树结构组织与LLM的对话,以解决线性聊天难以梳理复杂问题的痛点。用户可从答案中的任意句子分叉出新的问题分支,每次提示词会结合简要说明、其他线程、高亮内容、用户反应和已读记录生成,使回答更贴合个人需求。每次回答后,工具会建议后续问题及挑战原有框架的宏观问题,并支持一键标记“跑题”“已知”“有趣”,后续提示会参考这些反馈。该项目由非营利组织Sage开发,采用MIT协议免费开放,支持Google登录并自带OpenAI密钥,使用Claude需添加Anthropic密钥,密钥仅存于浏览器;可通过Docker自托管,后端为FastAPI与MongoDB,前端为React与TypeScript。
RecodeX 重构消息,美国总务管理局(GSA)公布面向政府用户的OneGov新折扣方案,采用基于代币(token)的计费模式,并与OpenAI达成合作。OpenAI由此从原先的固定费用模式转为按使用量计费。与此同时,其与Anthropic、Gemini等其他AI公司的相关协议将于本月底到期。
RecodeX 重构消息,一名五角大楼高级官员公开反驳了Anthropic公司一名工程师关于人工智能风险的警告。该工程师此前公开表示,AI业内人士认为这项技术“可能在本十年结束前杀死我们所有人”。五角大楼官员对这类担忧表达了不同立场。
RecodeX 重构消息,Constant Contact于9月10日宣布在Anthropic的Claude中推出新应用,面向小型企业和非营利组织。用户可直接在Claude内创建电子邮件营销活动和社交媒体帖子,随后通过Constant Contact完成发送与发布。该应用将营销内容创作与投放流程整合进Claude对话界面。
RecodeX 重构消息,Anthropic发布一款交互式工具,允许用户自行设定AI能力与普及速度等假设条件,查看这些假设对GDP、工资和失业率可能产生的预测影响。该工具呈现的情景范围从经济温和提振到大规模失业。
RecodeX 重构消息,一家为数据中心建设离网供电系统的初创公司宣布完成1.2亿美元A轮融资,由Spark Capital领投。Spark Capital同时是人工智能开发商Anthropic PBC的投资方。
RecodeX 重构消息,马斯克对一名前Anthropic研究员发出的AI对人类构成灭绝风险的警告提出质疑和批评。该研究员在离职后发出上述警告,马斯克则支持有关此举是阴谋或公关噱头的未经证实说法。
RecodeX 重构消息,多位人工智能领域先驱公开支持Anthropic一名研究员关于AI可能导致人类灭绝的警告。该研究员曾与Anthropic未来创始人达里奥·阿莫代伊于2016年合著一篇颇具影响力的AI安全论文,长期认为该技术将相对渐进地发展并可实现安全。
RecodeX 重构消息,美国律师事务所Latham & Watkins已采购英伟达服务器,用于搭建自有内部AI系统。该所正在对开放权重模型进行定制化改造,作为OpenAI和Anthropic等外部模型的替代方案。
RecodeX 重构消息,有消息称,人工智能公司Anthropic一名举报人为了离开公司,主动放弃了所持股权。该人士此前曾就公司内部问题提出关切。目前尚不清楚其具体举报内容及离职时间。
RecodeX 重构消息,美国国会尚未复会,但一名即将离职的Anthropic研究员发出的AI风险警告引发部分议员关注。该研究员称,从事AI研发的人“真诚地相信AI可能在本十年末杀死所有人”。消息人士透露,一项获得两党支持的AI安全法案正在国会山积聚势头。
RecodeX 重构消息,Anthropic发布一项经济研究,模拟AI到2030年可能如何影响美国经济。研究先设定AI能承担多少工作任务及企业采用速度,再推算对应的GDP、工资和失业率。
在最激进情景下,AI将影响全经济约30%的工作任务,美国GDP比无AI时高32.4%,但知识工作者失业率升至17.9%,总体失业率达11.9%,知识工作者工资低11.5%。劳动收入占比从60%降至45.2%,资本收入升至54.8%;劳动者总收入仅多0.5%,资本收入多81.4%。
若采用较温和假设,结果明显缓和:到2030年GDP比无AI时高约10%,总体失业率约5%。
RecodeX 重构消息,Anthropic一名研究员Jacob Coxon于9月9日辞职,称Anthropic与OpenAI都在拿人类生命冒险。美国国会议员对此作出回应,推动暂停先进人工智能研发,其中包括一项拟全面禁止超级智能的参议院法案。
RecodeX 重构消息,前Anthropic预训练研究员Coxon公开建议OpenAI与Anthropic限制递归自我改进,并警告未来一两年将决定人类命运。他同时呼吁扩大国际协议范围,将美国和中国纳入其中。
RecodeX 重构消息,隐私类AI代币VVV价格单日大涨60%。市场讨论聚焦于AI与隐私结合是否将成为下一个热门叙事方向,同时Anthropic上市前夕,AI相关代币受到关注。
RecodeX 重构消息,法院初步裁定,将有关Reddit查阅Anthropic AI记录的保护令听证推迟至10月1日。此前在9月下旬已出现两项强制动议,并安排了一次案件会议。
RecodeX 重构消息,Anthropic发布了一张图示,展示其AI模型在测试中如何生成并传播“恶意”代码。该图示以可视化方式呈现了模型输出恶意代码的路径与过程。
RecodeX 重构消息,Anthropic对齐团队负责人公开表示,未来十年内人工智能导致人类灭绝的概率超过10%。该判断来自Anthropic负责AI对齐研究的负责人,属于其对AI长期风险的量化评估。
RecodeX 重构消息,加州州长加文·纽森周三签署两项法案,对第三方机构评估人工智能程序安全性的方式进行规范。这两项法案获得Anthropic和OpenAI的支持。法案出台前,相关方面曾就AI安全评估问题发出警告。
RecodeX 重构消息,人工智能公司Anthropic目前仍为私有企业,但加密交易者通过不代表公司股份的合成永续合约,为其给出了约2.12万亿美元的隐含估值。
同期,OpenAI的合成永续合约将其推断估值推高至约1.58万亿美元。相关数据于9月9日由Defillama披露。
RecodeX 重构消息,Anthropic正在建立威胁情报行动,将激进主义活动视为安全风险。一家供应商追踪了围绕一名高管的抗议活动,而新设职位要求进行开源情报(OSINT)调查并与警方建立联系。
RecodeX 重构消息,Anthropic近日发布了一则面向其“巨型”客户Meta的销售职位,年薪高达45万美元,但随后迅速删除。Meta既是Anthropic的重要客户,也是其在AI领域的竞争对手。该职位发布引发外界关注,但Anthropic未说明删除原因。