360首席科学家潘剑锋:智能体安全的核心,是驾驭AI不确定性

  新浪科技讯 6月26日下午消息,在ISC.AI 2026大会期间 ,360集团首席科学家、集团高级副总裁潘剑锋表示 ,“去年大家还在怀疑,AI能不能干好漏洞挖掘的活儿;今年,AI漏洞挖掘已经把安全人员逼到了墙角 。 ”

360首席科学家潘剑锋:智能体安全的核心	,是驾驭AI不确定性-第1张图片

  在他看来,这并非安全人员的淘汰危机,而是整个行业加速升级的信号 ,并针对智能体的天然安全短板,提出了“驾驭AI不确定性 ”的全新安全治理范式 。

360首席科学家潘剑锋:智能体安全的核心,是驾驭AI不确定性-第2张图片

  潘剑锋认为 ,传统安全面临的挑战,并不只是攻击手段增多 、攻击速度加快,更深层的原因是计算逻辑发生了变化。

  传统软件建立在确定性计算之上 ,人把不确定的世界抽象 、建模为确定的计算,这是人适应机器。但大模型出现之后,计算从确定走向了不确定 ,模型能够直接处理模糊、开放、充满变化的真实世界任务 ,机器可以理解人类意图 、反过来去适应人了 。

  这种不确定性赋予了AI推理、创造和处理复杂任务的能力,也成为智能体新型安全风险的根源。即便输入相同的任务,智能体也可能产生不同的理解、推理路径和行动结果。

  潘剑锋将这种不确定性分为一体两面 。

  一面来自外部。攻击者不再需要直接下达明显的恶意指令 ,而可以把恶意意图隐藏在用户输入 、系统提示、工具返回等内容中。人未必能看出其中的危险,大模型却可能“读懂”隐藏指令,进而实现模型注入、指令覆盖等 。

  另一面来自内部。大模型依赖统计规律生成结果 ,不具备对现实世界的完整 、稳定认知,因此无法彻底避免幻觉,比如编造不存在的实体、对事件顺序和持续时间的认知错误等。同时 ,当智能体开始连续推理、调用工具,甚至与其他智能体协同工作时,一个看似微小的判断错误 ,可能沿着任务链不断传递和放大 。

  潘剑锋认为,智能体时代的安全目标需要从“防御确定威胁”,转向“管控不确定性 ”。

  围绕这一变化 ,潘剑锋在主题演讲中提出了360智能体安全治理的整体思路:在输入层识别恶意意图 ,在推理层减少幻觉和错误判断,在执行层限制智能体的行动边界。这套思路背后的逻辑是,不确定性很难被彻底消除 ,但可以被识别 、约束和兜底 。换句话说,安全不能保证AI永远不犯错,但必须确保错误不会直接演变成安全事故 。

  在输入层 ,360通过恶意意图识别引擎,识别隐藏在用户输入、系统提示、工具返回中的攻击意图,防止智能体被诱导 、越狱或劫持任务目标 ,其解决的核心思路是“以模治模”。对于外界普遍关注的360差异化问题,潘剑锋将关键归结为两个字:数据。

  “恶意意图识别模型的专项训练越来越由数据决定 。”他表示,360长期积累了搜索 、安全攻防及监管合规等多类数据 ,形成了一般安全厂商难以获得的语料资源。实测显示,接入360恶意意图识别引擎后,开源大模型的整体安全性可提升10%至30%。

  在推理层 ,360通过自研的世界认知模型 ,为大模型提供理解世界内在机制、预测未来状态、辅助决策的“认知锚点 ”,约束和引导大语言模型的推理过程,从根源上抑制大语言模型的幻觉 。

  在执行层 ,环境孪生沙箱则为智能体划定安全的行动半径,对工具调用 、数据访问和系统操作进行监控,出现异常时及时拦截和回滚。

  对于未来的市场格局 ,潘剑锋判断,智能体安全将成为每个智能体的标配基础设施。

  但这一市场不会被一家厂商完全垄断 。“它可能更像手机行业,几家大型厂商占据主要市场 ,同时不同细分领域仍然存在大量专业化空间。”

  他同时强调,AI厂商并不会因为模型能力增强,就直接取代安全公司。安全仍然是一个高度垂直、依赖攻防经验和行业知识的专业领域 。但AI的发展 ,已经开始重新划定安全行业的门槛。

标签:

相关推荐

  • 安微菜籽今日最新行情/安徽菜籽最新费用行情

    安微菜籽今日最新行情/安徽菜籽最新费用行情

    安徽各地油菜籽今年产量高不高〖壹〗、主产区具体产量情况作为全省产油大县的安庆宿松,今年28万亩油菜进入收割高峰期,测产显示全县油菜籽总产量预计可达67万吨;黄山歙县预计收获油菜13万亩,平均亩产超100公斤。〖贰〗、025年安徽油菜籽整体收成情况及关键数据如下:全省平均水平近来安徽省油菜籽平均单产稳定在130-150千克/亩,部分种植管理优质的区...

  • 【铟期货实时行情,铟期货费用走势图】

    【铟期货实时行情,铟期货费用走势图】

    哪里能查到粗铟的真实交易费用〖壹〗、查询粗铟真实交易费用,最权威和直接的途径是专业的金属资讯平台和交易所。专业金属资讯网站这些平台提供每天更新的现货报价,是行业内的主要借鉴:上海有色网:每天上午10点左右更新铟锭等有色金属的含税自提价、仓库交割价等细分数据,信息非常详细,但部分深度报告需要付费订阅。〖贰〗、近来无法提供粗铟的实时成交费用,2026年2月...

  • 【2017山西煤矿行情,山西煤矿近况】

    【2017山西煤矿行情,山西煤矿近况】

    2017年玉米费用〖壹〗、当前,正值东北和华北玉米大量上市,农户售粮积极性增强,供应逐渐趋于宽松。『2』年初受到春节备货及物流因素带动,呈现趋涨走势;加上对来年播种面积减少的预期(农业供给侧改革,调减玉米面积),费用表现坚挺。高点一般在3月前后。『3』4月份春耕前,将迎来售粮小高峰,而此时需求相对淡季,市场偏于下行。〖贰〗、一斤9毛钱,最近两年都是九毛钱左...

  • 如何查看外盘期货行情/怎么看外盘期货行情

    如何查看外盘期货行情/怎么看外盘期货行情

    实时看外盘期货的app〖壹〗、TradingView:功能较为全面,能支持外盘期货实时行情查看,还有社区分析板块,适合那些需要进行技术分析的用户,可在社区中与其他投资者交流心得和见解。可根据自身需求,如是否需要交易功能、专业工具以及对行情免费与否等方面的要求,来选取合适的APP。〖贰〗、实时看外盘期货的app博易云:博易云软件可以免费实时观看外盘行情。用...

  • 北仑疫情最新消息(北仑 疫情)

    北仑疫情最新消息(北仑 疫情)

    10月14日0-15时宁波北仑新增4例新冠肺炎确诊病例北仑区新增4例新冠肺炎确诊病例10月14日0-15时,宁波市北仑区新增4例新冠肺炎确诊病例,系在集中隔离点核酸检测中发现,病例5均系病例1密切接触者,已第一时间闭环转运至定点医院。0月14日15-24时宁波北仑区新增4例新冠肺炎确诊病例10月14日15-24时,宁波市北仑区新增4例新冠肺炎确诊病例,系在...

  • 泸铝期货实时行情(今日长江铝锭费用行情走势图)

    泸铝期货实时行情(今日长江铝锭费用行情走势图)

    2510泸铝交易策略实时行情分析关注费用动态:实时关注沪铝2510期货的最新价、开盘价、比较高价、最低价以及涨跌幅等信息。这些信息能够直接反映市场的供需关系和费用走势,是制定交易策略的重要依据。持仓量与资金流向分析持仓变化:观察多头持仓和空头持仓的对比情况,以及持仓量的整体变化趋势。综上所述,沪铝产业链涉及铝土矿、氧化铝、电解铝和铝材消费等多个环节,每...

  • 浦东机场疫情/上海浦东机场,疫情

    浦东机场疫情/上海浦东机场,疫情

    听说赴美留学生把上海浦东机场给堵了?上海浦东机场赴美留学生排队现象属实,但“堵机场”表述夸张;当前赴美留学需理性评估风险,是否为最优选取因人而异,且与“敢死队”的联想毫无逻辑关联。赴美留学热潮与机场排长队现象美国放开留学生赴美限制:自8月1日起,美国放开了留学生赴美的限制,持有F/M签证的学生可直接由中国前往美国。这一政策调整使得大量中国留学生开始规划赴美...

    2026/06/29
  • 【废铜价期货行情走势,今日废铜期货】

    【废铜价期货行情走势,今日废铜期货】

    铜电线行情截至2026年5月及4月底的公开信息,国内铜电线交易及回收行情中,华东地区(上海、江苏、浙江)行情比较好,华北地区(北京、天津)表现紧随其后,华南、西南、东北地区行情相对偏弱。公开借鉴的回收类铜材费用光亮铜线(国标电缆拆解、无氧化):华东、华南地区回收价约44-47元/斤,华北济南约43元/斤,西南成渝地区约47-48元/斤;上海市场1电解铜现...

  • 伦敦锌今日行情(今日伦敦锌费用走势)

    伦敦锌今日行情(今日伦敦锌费用走势)

    伦敦lme锌期货交易实时行情伦锌期货LME实时行情与600528股票无关。以下是针对这两个概念的详细解伦锌期货LME实时行情:定义:伦锌期货LME指的是在伦敦金属交易所(LondonMetalExchange,简称LME)上进行交易的锌期货合约的实时行情。LME是全球最重要的金属交易所之一,提供包括锌在内的多种金属的期货和现货交易。查询锌实时行情的三大...

  • 【北京新增病例详情公布,北京新增确诊病例详情】

    【北京新增病例详情公布,北京新增确诊病例详情】

    北京6月14日0时至7时新增8例确诊病例,详情来了丨权威发布病例1性别年龄:某男,48岁籍贯:河北唐山工作单位:北京新发地市场现住址:丰台区发现与诊断:12日在疫情溯源采样检测中发现核酸检测阳性,13日出现头疼症状,经专家会诊为确诊病例,临床分型为轻型。月18日北京大学世界医院报告1例新冠肺炎确诊病例,为急诊科护士,昌平区已对医院采取封闭管理措施并...

返回顶部