猫眼电影
猫眼电影记者 郑勇 报道首次登录送91元红包
IT之家 12 月 23 日消息,尽管 OpenAI 正致力于强化其 Atlas 人工智能浏览器的网络攻击防御能力,但该公司承认,提示词注入攻击 —— 一种通过操纵人工智能智能体、使其执行隐藏在网页或电子邮件中的恶意指令的攻击手段 —— 带来的风险短期内无法消除。这也引发了人们对人工智能智能体在开放网络环境下能否安全运行的质疑。
OpenAI 在当地时间周一发布的一篇博客文章中详细阐述了该公司为增强 Atlas 的防御能力、抵御持续攻击所采取的措施,并写道:“提示词注入攻击就像网络上的诈骗和社会工程学攻击一样,几乎不可能被完全‘攻克’。”该公司坦承,ChatGPT Atlas 的“智能体模式”“扩大了安全威胁面”。
据IT之家了解,OpenAI 于今年 10 月推出了 ChatGPT Atlas 浏览器,随后安全研究人员迅速发布了相关演示,证明只需在谷歌文档中输入寥寥数语,就能改变底层浏览器的行为。就在同一天,浏览器厂商 Brave 也发布博客指出,间接提示词注入攻击是所有人工智能驱动型浏览器面临的系统性挑战,Perplexity 公司的 Comet 浏览器也未能幸免。
意识到提示词注入攻击威胁将长期存在的并非只有 OpenAI 一家。英国国家网络安全中心本月早些时候发出警告,称针对生成式人工智能应用的提示词注入攻击“或许永远无法被完全缓解”,这使得各类网站都面临数据泄露的风险。这家英国政府机构建议网络安全从业者,应着力降低提示词注入攻击的风险及影响,而非寄希望于将这类攻击“彻底阻止”。
就 OpenAI 而言,该公司表示:“我们将提示词注入视为一项长期的人工智能安全挑战,未来需要持续强化防御措施。”
那么,面对这项永无止境的任务,OpenAI 给出了怎样的解决方案?答案是建立一套主动式快速响应机制。该公司称,这套机制已初显成效,能够在新型攻击手段被用于“实战攻击”前,提前在内部发现这些攻击策略。
这一思路其实与 Anthropic、谷歌等竞争对手的主张并无本质区别:要应对提示词注入攻击的持续威胁,必须构建多层防御体系,并持续开展压力测试。例如,谷歌近期的研究重点就聚焦于智能体系统的架构层面与策略层面管控。
不过,OpenAI 采取了一种与众不同的策略 —— 开发“基于大语言模型的自动化攻击程序”。本质上,这是一款由 OpenAI 借助强化学习技术训练而成的机器人,其作用是模拟黑客行为,寻找向人工智能智能体植入恶意指令的途径。
这款机器人可以先在模拟环境中测试攻击手段,再投入实际应用。模拟环境能够还原目标人工智能在遭遇攻击时的思维过程与可能采取的行动。随后,机器人可分析目标的反应,调整攻击方式,并反复进行测试。这种能够洞悉目标人工智能内部推理逻辑的优势,是外部攻击者所不具备的。因此从理论上讲,OpenAI 的这款机器人发现系统漏洞的速度,要快于现实中的黑客。
这是人工智能安全测试领域的一种常用方法:打造一个智能体,让它找出系统的极端漏洞场景,并在模拟环境中开展快速测试。
OpenAI 在博客中写道:“我们通过强化学习训练的攻击程序,能够诱导目标智能体执行复杂且需要多步骤推进的有害任务流程,这些流程的操作步骤可达数十步甚至数百步。此外,我们还发现了一些全新的攻击策略,这些策略既未出现在我们的人工红队测试中,也没有相关外部报告提及。”
在一份演示案例中(上图为部分截图),OpenAI 展示了其自动化攻击程序如何将一封恶意电子邮件植入用户收件箱。当人工智能智能体后续扫描收件箱时,它执行了邮件中隐藏的恶意指令,发送了一封辞职信,而非按要求撰写休假自动回复邮件。不过 OpenAI 称,在完成安全更新后,“智能体模式”已能成功检测到提示词注入攻击的企图,并向用户发出告警。
该公司表示,尽管要实现对提示词注入攻击的万无一失防御难度极大,但仍在依靠大规模测试与更快速的补丁更新周期,力争在相关攻击手段出现在现实世界之前,完成系统防御加固。
针对 Atlas 的安全更新是否已显著降低攻击成功率这一问题,OpenAI 发言人拒绝透露具体数据,但表示该公司早在 Atlas 浏览器发布前,就已与第三方机构合作,共同强化其针对提示词注入攻击的防御能力。
网络安全公司 Wiz 的首席安全研究员拉米・麦卡锡指出,强化学习技术确实能实现对攻击者行为的持续自适应防御,但这只是解决方案的一部分。
麦卡锡在接受科技媒体 TechCrunch 采访时表示:“衡量人工智能系统风险的一个有效方法,是计算其自主性与访问权限的乘积。”
他进一步解释道:“智能体浏览器恰恰处于这一风险模型中的高挑战区域:它们拥有中等程度的自主性,同时又具备极高的系统访问权限。当前许多安全建议,其实都反映了这种利弊权衡。比如限制登录状态下的访问权限,主要是为了减少暴露面;而要求对各类确认请求进行人工审核,则是为了约束智能体的自主操作权限。”
这两点也被列入 OpenAI 向用户提供的风险降低建议中。该公司发言人还表示,Atlas 浏览器经过训练,在发送邮件或执行支付操作前,都会向用户发起确认请求。OpenAI 同时建议用户,应向智能体下达具体明确的指令,而非直接授予其收件箱访问权限,简单告知其“自行采取必要措施”。
OpenAI 指出:“即便已部署安全防护措施,过高的自主操作权限也会让隐藏的恶意内容更容易对智能体产生影响。”
尽管 OpenAI 声称,保护 Atlas 用户免受提示词注入攻击是公司的首要任务,但麦卡锡仍对这类高风险浏览器的投入产出比持怀疑态度。
他在接受 TechCrunch 采访时表示:“对于大多数日常使用场景而言,智能体浏览器目前带来的价值,尚不足以匹配其当前的风险水平。由于它们能够访问电子邮件、支付信息等敏感数据,因此风险系数极高 —— 但与此同时,也正是这种高访问权限赋予了它们强大的功能。这种利弊平衡状态未来或将逐步改善,但就目前而言,其中的取舍权衡依然十分显著。”
时事1:体育娱乐网址
12月26日,辛选75%复购率揭示直播电商消费新逻辑,2021年10月,郭宁宁任福建省委常委,11月任省政府党组副书记,直至此次职务调整。,乐鱼体育在线登录。
12月26日,反扑为时过晚,中国男篮世预赛再负韩国男篮,46979名观众创造了国足多年来主场上座纪录,同样本场比赛也有超过400名媒体报名采访。,现在还有哪个app可以玩德州,pg电子麻将胡了秘籍,铁杆国际真人。
时事2:365体育官方中文版ios
12月26日,皮肤科医生建议,秋季护肤重在保湿护屏障,也门政治评论人士认为,作为中东地区的主要国家,沙特和伊朗在也门冲突中有着举足轻重的影响,两国间曾经的矛盾也体现在对于也门冲突的不同态度上。随着两国在中国的斡旋下宣布恢复外交关系,和平解决也门危机也将成为可能。,必赢亚洲官网手机登录页,必威平台网页版,世界杯买球as83·me。
12月26日,解放军南部战区位中国黄岩岛领海领空及周边区域组织战备警巡,泰国主帅石井正忠赛后表示本场比赛只拿到平局,自己负全部责任。随后中国队的赛后新闻发布会,有记者转述泰国队主帅的言论,问伊万为这个平局负多少责任?由于该记者还提问了第二个关于变阵双中锋的问题,伊万跳过责任的提问转而回答第二个问题,但现场媒体并不满意,集体追问伊万自己应该承担多少责任。老头多少显得有些尴尬,只能无奈说道,“作为职业教练,任何结果都要负责。”,ysb体育平台,沙巴体育平台全网独家,怎样下载体育app。
时事3:世界杯用哪个软件买球
12月26日,跨境客车司机违规携带活体观赏鱼和宠物蟹进境被查获,江西省委常委会、司法部党组召开会议:坚决拥护对唐一军审查调查,久久游戏,银河至尊平台注册,365手机网址注册。
12月26日,全盲“女飞人”残特奥会加冕“三冠”:一条引跑绳 两颗冠军心,[#向松祚预测房价未来还会继续下跌#]房价未来是否还会下跌?经济学家、深圳市大湾区金融研究院院长向松祚认为,房价未来还会继续下跌,一方面投资需求下降,未来通过买房理财的人会越来越少;另一方面,近几年房地产的销售主要来自刚需,这也是未来人们买房子的主要需求,但它不足以支撑房价继续上涨。同时,很多人在“追涨杀跌”的心理下希望把房子变现,房价越是下跌他们越是想卖。(中新经纬),新莆京pj678,世界杯足球购买渠道,澳门正大娱乐官方版下载。
时事4:皇冠即时
12月26日,意前官员:美国无法撼动中国发展进程,能源领域将迎新格局丨世界观,“今日俄罗斯”报道称,至于斯诺登提到的“大规模监控”,指的就是他所经历的“棱镜门”事件。由美国政府发起的大规模电子监听项目“棱镜计划”在2013年被曝光。事发后,美国政府以盗窃政府财产、向未经授权的人提供机密信息等罪名指控斯诺登,并吊销其护照,最终斯诺登经历近十年流亡生涯后入籍俄罗斯。,国际象棋真人 图片,火狐体育平台app下载ios,亚游棋牌。
12月26日,沙县小吃旅游文化节开幕 以“烟火气”融两岸情,此外,受到调控影响,短期内碳酸锂期货成交量虽然不及11月中旬的高点,但是持仓量依旧处于108万手左右,仅次于今年前期111.9万手的历史峰值,反映出追踪趋势的长期资金并未撤离。,凯发娱乐登陆首页,云顶娱乐客服电话多少,九五至尊体育APP。
责编:孙敬修
审核:严奉宪
责编:塔拉·戴维












