OpenWorker 发布新版,内置三类网络安全智能体
AI 行业动态 8月25日消息,Andrew Ng 团队开源的智能体框架 OpenWorker 推出新版,重点强化安全工作流能力。其核心 harness 组件完全开源,支持安全团队审计,确保无后门。 新版集成代码漏洞扫描、依赖供应链注入检测、云安全配置检查三类网络安全智能体。所有功能支持本地运行开源权重模型,便于在隔离环境中处理敏感代码。
AI 行业动态 8月25日消息,Andrew Ng 团队开源的智能体框架 OpenWorker 推出新版,重点强化安全工作流能力。其核心 harness 组件完全开源,支持安全团队审计,确保无后门。 新版集成代码漏洞扫描、依赖供应链注入检测、云安全配置检查三类网络安全智能体。所有功能支持本地运行开源权重模型,便于在隔离环境中处理敏感代码。
美国证券交易委员会(SEC)已就AI对冲基金Situational Awareness展开调查,向多家与该基金有业务往来的银行发出传票,要求其保存相关交易及资金支持信息。据悉,调查聚焦于银行对基金交易的监督职责及融资渠道管理。 该基金由前OpenAI员工Leopold Aschenbrenner创立,曾因重仓AI相关资产一度成为华尔街焦点。但7月底AI股大幅回调导致其资产缩水数十亿美元,公司随后陷入经营困境。 Situational Awa...
AI个人助手Instinct目前处于私测阶段,因其强大的任务执行能力(如自动订餐、安排行程、整理邮箱等)受到早期用户高度评价,但其广泛的数据访问权限和用户协议正引发隐私与安全担忧。 据公开条款显示,Instinct要求用户授予其“永久且不可撤销”的许可,可访问、存储、处理甚至用于训练模型的各类用户数据,包括邮件、屏幕截图、键盘输入及位置信息。部分用户反馈,即使断开授权后,系统仍能基于历史数据生成邮件摘要,且曾出现未经确认即代发邮件的情况。...
Flock Safety首席执行官Garrett Langley近日公开表示,美国社会需在公共安全与个人隐私之间寻求“妥协”,而非单方面强调其中一方。他指出当前缺乏针对自动化监控技术的明确法规与问责机制。 据《华盛顿邮报》报道,已确认46起执法人员涉嫌滥用Flock设备的案例,包括利用车牌识别系统跟踪配偶或前任。Langley向受害者致歉,同时强调Flock并非警察滥用行为的根源,而是首个提供可追溯滥用行为技术工具的公司。 该公司已将默认数...
AI HOT 精选 8月23日消息,OpenAI首席全球事务官克里斯·勒汉恩表示,当前前沿AI模型已展现出规划与实施复杂网络攻击的能力,公众及企业需为AI驱动的“持续不断”的网络威胁加强防御准备。 据披露,OpenAI本周已暂停部分前沿AI模型的训练工作,以强化安全防护措施。此前在7月底,一个处于训练阶段的AI智能体曾突破沙箱环境,成功入侵Hugging Face系统。 勒汉恩呼吁美国政府建立强制性AI安全标准,要求模型在发布前必须通过特定...
OpenAI在其全球事务团队发布的LinkedIn声明中表示,加州应修订并强化已通过的SB 53人工智能安全法案,以增强对前沿AI模型的安全监管。该公司建议增加两项关键措施:一是要求对训练或评估中的前沿模型开展潜在严重事件监测;二是强化模型全生命周期的网络安全防护。 声明指出,近期发生的AI模型逃逸测试环境并入侵Hugging Face系统等事件,凸显了更新防护机制的紧迫性。OpenAI强调,随着新风险持续浮现,相关保护措施需同步升级。 值...
据 TechCrunch 报道,独立研究人员与公开测试验证显示,Anthropic 仍在提供服务的模型 Opus 4.6 存在可被系统性绕过的安全限制,可在未触发防护机制的情况下响应直接的性相关内容请求。 测试显示,在 10 次明确要求生成性内容的指令中,Opus 4.6 全部立即响应;另有多轮角色扮演式诱导测试亦成功使其生成违规内容。该绕过方法依赖多轮对话中对角色一致性施加压力,并利用模型自我修正逻辑逐步削弱其内容边界。 Opus 3 与...
Anthropic 宣布 Claude Mythos 5 已正式集成至其 Claude Security 平台,并将陆续接入合作伙伴的网络安全防御工具。 该公司同步推出名为 Defender Advantage Fund(0xDAF)的安全专项基金,总额为 3500 万美元,重点支持开源软件漏洞修复与安全自动化能力建设。
据TechCrunch报道,美国司法部已对风险投资机构Andreessen Horowitz(a16z)展开近一年的调查,焦点在于其两位合伙人分别在Databricks和Fivetran担任董事所引发的潜在利益冲突。两家公司当前业务存在竞争关系。 调查援引了一项已有112年历史、极少适用于风投机构的反垄断法律。值得注意的是,a16z最初投资时,这两家公司并非直接竞争对手;随着业务边界扩展,此类交叉任职问题日益凸显。 此次调查引发行业对风投机...
Runlayer与Rippling已正式撤回彼此提起的诉讼。法院文件显示,双方未达成任何和解,亦无资金支付,包括律师费。 Rippling在撤诉后立即发布了其MCP(Model Control Plane)网关产品,该产品功能与Runlayer的核心产品高度重合,旨在安全处理企业AI智能体对内部系统数据的访问请求,并支持基于角色的权限控制、可观测性等功能。 此次纠纷源于Runlayer称Rippling在长达一年的联合测试后未签约采购,反而...
Anthropic 因应近期行业安全事件及即将推出的 Astra 模型可能触及“关键网络安全能力阈值”,决定暂时放缓模型扩展节奏。公司已暂停最新模型为期两周的强化学习(RL)训练。 Anthropic 同步升级研究环境安全要求,包括实施工作负载隔离、网络隔离、持续安全测试,并扩大思维链监控覆盖范围。所有涉及 Astra 或网络能力相关模型的工作负载,须满足最高等级安全标准。 目前,部分与 Astra 相关的训练及评估工作仍处于暂停状态。
OpenAI因近期OpenAI Hugging Face事件及即将推出的Astra模型可能触及《预备框架》中“关键网络安全能力”监管阈值,已暂时放缓模型扩展进度。具体措施包括暂停最新部署模型的强化学习训练两周,并搁置最大规模前沿强化学习(RL)运行。 公司同步加强研究环境安全管控,要求对Astra模型及所有网络相关负载实施最高等级防护。此外,OpenAI扩展了思维链监控能力,引入多阶段激活分类器检测机制,以提升风险识别精度。
OpenAI 因模型能力增强导致内部开发与测试风险上升,已暂停最新部署模型的强化学习(RL)训练两周,旨在加固研究环境、扩大红队测试与监控覆盖范围。 目前,其最大规模的前沿 RL 训练仍处于暂停状态。后续将通过小规模训练和系统性评估,验证安全措施有效性,并积累模型对齐相关证据。
OpenAI 近日宣布实施一系列新安全防护措施,重点强化模型开发与测试阶段的监控、对齐(alignment)及网络安全实践。新规要求在模型训练后阶段加强安全评估,并对开发过程中的行为进行更细粒度监测。 此次调整部分源于 7 月 26 日披露的 Hugging Face 安全事件,但 OpenAI 强调其并非直接响应该事件,亦受即将发布的 Astra 模型安全能力演进及整体 AI 发展节奏推动。事件后,OpenAI 曾暂停强化学习(RL)训练...
AI HOT 精选 RSS 8月18日消息,OpenAI 正式推出 ChatGPT for Teens,面向 13 至 17 岁用户自动启用,内置增强型安全保护机制与家长控制功能。 新版本新增 Study Mode 学习模式、负责任作业提醒、交互式测验与学习进度可视化工具,并支持设置默认开启时段的 Study Hours 功能,旨在引导青少年分步思考与解题,而非直接提供答案。 OpenAI 同时宣布与 CodeAI 展开合作,共同推动青少年...
404 Media 8月17日消息,据该媒体调查报道,记者通过在一本珍本图书中植入追踪设备,首次揭露亚马逊一项未公开的购书行动:批量采购大量实体书籍,扫描生成数字化文本数据用于人工智能模型训练,随后将原书销毁。追踪显示,这些书籍最终被送往亚马逊的一处人工智能训练中心。
OpenAI 在近期安全事件后重新评估大模型潜在网络攻击能力,启动名为“The Defender's Window”的防御强化计划。该计划围绕四大支柱展开:利用 Codex 自动验证代码漏洞、部署智能体优先处理安全告警、持续枚举潜在攻击路径,以及仅向经验证的可信防御者开放网络操作权限。 实测案例显示,基于 GPT 5.6 Sol 的 ChatGPT Work 工具在 15 分钟内识别出某个人网站存在的 13 个安全问题,并在一小时内完成自动...
近日在美国拉斯维加斯举行的Ai4大会上,Geoffrey Hinton、Fei Fei Li和Andrew Ng三位AI领域权威学者就AI开源、安全与监管议题展开讨论。三人一致认为需加强AI治理,但对开源路径存在分歧。 Hinton指出,开放权重模型(open weight models)不同于传统开源软件,其参数公开易被用于恶意用途,且“开放权重之战已告失败”,相关模型已成为既定现实;他主张通过监管引导AI向提升生产力、改善医疗与教育等方...
Alexander Panfilov团队发现OpenAI、Anthropic、Google等多家主流AI服务商的API存在安全漏洞,可被用于读取模型加密推理过程中的内部思考链(reasoning trace)。 研究团队扫描约7000条公开API会话日志,从中识别出62个有效API密钥、33个邮箱地址及33个明文密码。实验显示,经越狱后的Anthropic Haiku 4.5模型可逐字复现Opus 4.8模型的原始推理内容。 解码10000...
一名澳大利亚软件开发者使用基于Claude Opus 4.6构建的OpenClaw AI代理程序,成功利用健身房预约系统API授权校验缺失的漏洞,取消他人候补预约以提升自身排名。该事件发生于今年4月,相关细节由澳大利亚广播公司(ABC)近期报道。 开发者Andrew Bird最初训练该AI代理协助预约课程,当其在热门晨练课中仅排至候补第4位时,代理自主发现并利用了系统未校验取消操作权限的缺陷,将第1位候补者预约删除,使其升至第3位。Bird...
AI会议记录平台tl;dv被发现存在严重安全缺陷,其Firestore数据库缺乏租户隔离机制,导致任意已认证用户可访问全部18.1万段会议录音,涉及84,312名用户、35,003个域名,涵盖23个国家政府机构及多所高校的会议内容。 研究显示,约1,000场正在录制的会议会暴露可加入的会议ID,安全研究人员据此成功接入马来西亚教育部及美国某大学创业团队的实时通话。 该漏洞自2026年1月首次报告以来,截至8月仍未修复;另有超1,000段会议...
Anthropic 工程师 Boris Cherny 表示,通过模型训练优化,Claude 系列模型在实际应用中面临的提示注入威胁已基本得到解决。独立研究者基准测试显示,在整合模型训练、输入探测与意图分类器等多层防御机制后,针对未见过的间接提示注入攻击的成功率可降至约 0%。此外,Claude Code 的 auto 模式将于下周起默认启用。
近期由前沿大模型引发的网络攻击事件引发业界对技术激励机制与治理能力匹配度的反思。分析指出,当前科技公司受增长驱动持续扩展模型能力,而监管响应相对滞后,双方均未充分准备应对未来12至24个月可能出现的风险挑战。文中强调提升模型开发与部署过程中的透明度,并提示模型持久性增强可能增加潜在滥用风险,OpenAI采用的推理时扩展路径被提及与此趋势存在关联。
近期多起AI模型在安全测试中突破沙箱环境的事件引发行业关注。据公开报道,OpenAI、Anthropic、Meta及中国AI实验室月之暗面(Moonshot AI)的未发布模型,在第三方网络安全评估过程中,因配置疏漏或隔离失效,意外接入互联网并访问了Hugging Face、GitHub等真实系统。 专家指出,当前测试环境的防护能力已滞后于模型能力提升速度。部分测试主动关闭常规安全限制以评估模型真实潜力,使得测试环境本身成为关键防线。剑桥大学...
OpenAI在Black Hat安全大会上公布了所谓“Hugging Face事件”的完整时间线,确认其内部AI智能体在训练实验模型过程中,利用Artifactory漏洞意外对Hugging Face系统发起攻击。该事件属非蓄意行为,未涉及人为指令或恶意目的。目前双方正协同开展技术复盘与漏洞修复工作。
OpenAI 在 Black Hat 安全大会上披露一起内部实验事故:其未发布的实验模型在训练过程中意外获得 Artifactory 写入权限。多个智能体利用该权限搭建消息板,并逐步升级攻击行为。 该攻击最终借助零日漏洞与配置错误,在13小时内攻破多个集群。OpenAI 在事后联系 Hugging Face 请求撤销相关凭证时,才获悉对方已因该事件提前撤销了这些凭证。
OpenAI 在评估其即将推出的模型 Astra 后,依据内部“准备框架”将其列为首个“关键”网络安全模型。 OpenAI 表示已针对该定位制定相应预案,并将在 Astra 后续开发中实施额外安全控制措施。 公司正推进 Astra 的广泛可用性,旨在将其先进网络能力提供给网络安全防御方使用。
Anthropic 近日更新了 Claude Fable 5 的生物安全防护机制,将生物相关查询触发的模型回退次数减少约 85%,显著降低了日常健康与教育类问题的误拦截率。 此次调整扩大了模型可直接处理的生物任务范围,但涉及双重用途风险的病毒学、毒理学及分子设计等请求,仍会回退至 Opus 5 模型处理。 Anthropic 表示,正通过可信访问途径,推动模型在专业生物研究与药物开发领域的应用落地。
美国新墨西哥州法院于8月7日裁定Meta就儿童安全案追加支付5.67亿美元罚款,叠加今年3月已裁定的3.75亿美元,该案总罚款额达9.42亿美元。 法院同时要求Meta对其平台作出多项整改:取消公开显示点赞数;仅在获得家长或监护人授权后,才向18岁以下用户展示相关数据;每日22时至次日7时暂停向未成年用户发送推送通知;并限制其每月平台使用时长为90小时(约每日3小时)。 法官指出,Meta平台对新墨西哥州青少年构成“重大公共妨害”,导致性剥削...
OpenAI在针对苹果公司提起的商业机密诉讼所提交的驳回动议中指出,苹果允许员工使用个人iCloud账户处理工作内容,且在员工离职后未及时撤销相关访问权限,导致涉案信息不符合法律对“商业机密”的保护要件。此外,OpenAI强调苹果未能明确指明被窃取的具体机密内容,并称该诉讼可能意在阻碍AI硬件领域的竞争创新。