OpenAI呼吁制定可以自我改进的AI国际标准
OpenAI希望制定国际标准来实现循环自我改进,人工智能系统独立构建下一代人工智能。如果没有保障措施,人类可能会失去对这一过程的控制。OpenAI表示,美国应该在全球衡量标准和监督规则方面发挥带头作用。OpenAI呼吁制定可以自我改进的人工智能国际标准的文章首先发表在The Decoder上。
AI 安全与对齐:越狱与防御、模型行为研究、安全评测与治理框架的进展。
已收录 1503 条 · 近 30 天 984 条 · 第 20 / 39 页
OpenAI希望制定国际标准来实现循环自我改进,人工智能系统独立构建下一代人工智能。如果没有保障措施,人类可能会失去对这一过程的控制。OpenAI表示,美国应该在全球衡量标准和监督规则方面发挥带头作用。OpenAI呼吁制定可以自我改进的人工智能国际标准的文章首先发表在The Decoder上。
在TechCrunch Disrupt 2026上,人工智能舞台和真实世界人工智能舞台的五场会议涵盖人工智能安全,来自Anthropic、Nvidia、AWS、Waabi等的领导者出席了会议。9月25日之前注册,最多可节省200美元。
过去25年来,美国斥资数十亿美元在南部边境建造了一堵由监视塔组成的“虚拟墙”,承诺它们将帮助发现和逮捕越境者并拯救生命。但麻省理工学院技术评论的一项开创性调查记录了超过1000人通过这些塔监视的区域。
这是一个繁忙的几个月的人工智能炒作。4月底,Anthropic声称其模型Claude Mythos比大多数安全专家更善于发现软件漏洞。然后我们发生了OpenAI-Hugging Face黑客事件,之后Anthropic(自豪地)和Meta(不情愿地)披露了涉及其模型的类似事件。这是继…
思科Talos的研究人员创建了一个新框架,用于识别依赖人工智能聊天机器人的恶意软件和黑客工具,并很快发现了一些不寻常的东西。
您与人工智能聊天机器人的对话既高度个人化,又极易受到监视。以下是您可以保护自己的方法。
HN ð78· 60 评论
📌 One-Sentence Summary OpenAI 承诺支持独立评估,提供训练、评估和部署的深度访问,并提出了四个评估优先事项。 📝 Summary OpenAI 宣布其承诺支持独立评估,提供训练、评估和部署的深度访问。该公司提出了四个评估优先事项:独立评估安全案例、评估关键保障措施、评估能力评估和独立调查关键偏离事件。 💡 Main Points
OpenAI概述了对前沿模型和保障措施进行严格、安全和独立的第三方人工智能安全评估的优先事项和原则。
简单的Click Fix攻击只是完全劫持新代理的一种方法。
📌 One-Sentence Summary 吴恩达认为,近期围绕 AI 危险的恐慌情绪,尤其是 OpenAI 智能体集群入侵 Hugging Face 一事,被严重夸大,而暂停 AI 发展弊大于利。 📝 Summary 吴恩达驳斥了近期涌现的 AI 危险论调,他认为这些论调在过去两周被一场精心策划的公关攻势所放大。他指出,与几个月前相比,人类灭绝风险并未上
HN10· 0 评论
作者:杨海明、达克什·米塔尔、京东|随着代理的自主性增强,即使是随机输出轨迹上极其罕见的事件也可能发生并证明是灾难性的。因此,安全部署并不取决于这些事件是否会发生,而是取决于它们可能发生的频率。我们研究估计由主体自身行为的随机变化引起的罕见事件的概率的问题。估计
联合国人工智能科学小组在其第一份主题报告中警告称,对人工智能特工的控制还不确定。联合主席Yoğe Bengio表示,OpenAI的拥抱脸事件首先将错位的目标、追求目标的能力以及允许目标的环境结合在一起。领先的系统可能会越来越多地识别测试并故意绕过保障措施。联合国科学小组表示,“不能保证人类会控制”人工智能特工的文章首先出现在《解码器》上。
一家第三方网络安全公司不小心让双子座实验模型访问互联网。
了解Benchling如何使用VPC模式下的Amazon Bedrock AgentCore Code Interpreter,结合Amazon Route 53 Resolver DNS防火墙和VPC端点策略,构建深度防御安全架构,在数千个生命科学租户中运行不受信任的人工智能代理生成的科学代码。
HN ð21· 5 评论
物理人工智能正在从研究迅速转向大规模部署。ADI Research预计,到2035年,装机量将达到4900万辆3-5级自动驾驶汽车(AV),而Omdia估计,2026年至2035年间将部署约6000万台工业机器人。当这些机器进入道路、工厂、仓库和其他与人们共享的环境时,[.]