360首席科学家潘剑锋:智能体安全的核心,是驾驭AI不确定性

  新浪科技讯 6月26日下午消息,在ISC.AI 2026大会期间 ,360集团首席科学家、集团高级副总裁潘剑锋表示,“去年大家还在怀疑,AI能不能干好漏洞挖掘的活儿;今年 ,AI漏洞挖掘已经把安全人员逼到了墙角。”

360首席科学家潘剑锋:智能体安全的核心,是驾驭AI不确定性-第1张图片

  在他看来,这并非安全人员的淘汰危机 ,而是整个行业加速升级的信号,并针对智能体的天然安全短板,提出了“驾驭AI不确定性”的全新安全治理范式。

360首席科学家潘剑锋:智能体安全的核心	,是驾驭AI不确定性-第2张图片

  潘剑锋认为,传统安全面临的挑战,并不只是攻击手段增多 、攻击速度加快 ,更深层的原因是计算逻辑发生了变化 。

  传统软件建立在确定性计算之上 ,人把不确定的世界抽象、建模为确定的计算,这是人适应机器。但大模型出现之后,计算从确定走向了不确定 ,模型能够直接处理模糊、开放 、充满变化的真实世界任务,机器可以理解人类意图、反过来去适应人了。

  这种不确定性赋予了AI推理、创造和处理复杂任务的能力,也成为智能体新型安全风险的根源 。即便输入相同的任务 ,智能体也可能产生不同的理解 、推理路径和行动结果。

  潘剑锋将这种不确定性分为一体两面。

  一面来自外部 。攻击者不再需要直接下达明显的恶意指令,而可以把恶意意图隐藏在用户输入、系统提示、工具返回等内容中。人未必能看出其中的危险,大模型却可能“读懂 ”隐藏指令 ,进而实现模型注入 、指令覆盖等。

  另一面来自内部 。大模型依赖统计规律生成结果,不具备对现实世界的完整、稳定认知,因此无法彻底避免幻觉 ,比如编造不存在的实体、对事件顺序和持续时间的认知错误等。同时,当智能体开始连续推理 、调用工具,甚至与其他智能体协同工作时 ,一个看似微小的判断错误 ,可能沿着任务链不断传递和放大。

  潘剑锋认为,智能体时代的安全目标需要从“防御确定威胁”,转向“管控不确定性” 。

  围绕这一变化 ,潘剑锋在主题演讲中提出了360智能体安全治理的整体思路:在输入层识别恶意意图,在推理层减少幻觉和错误判断,在执行层限制智能体的行动边界 。这套思路背后的逻辑是 ,不确定性很难被彻底消除,但可以被识别 、约束和兜底。换句话说,安全不能保证AI永远不犯错 ,但必须确保错误不会直接演变成安全事故。

  在输入层,360通过恶意意图识别引擎,识别隐藏在用户输入、系统提示、工具返回中的攻击意图 ,防止智能体被诱导 、越狱或劫持任务目标,其解决的核心思路是“以模治模 ” 。对于外界普遍关注的360差异化问题,潘剑锋将关键归结为两个字:数据。

  “恶意意图识别模型的专项训练越来越由数据决定。”他表示 ,360长期积累了搜索、安全攻防及监管合规等多类数据 ,形成了一般安全厂商难以获得的语料资源 。实测显示,接入360恶意意图识别引擎后,开源大模型的整体安全性可提升10%至30%。

  在推理层 ,360通过自研的世界认知模型,为大模型提供理解世界内在机制、预测未来状态 、辅助决策的“认知锚点”,约束和引导大语言模型的推理过程 ,从根源上抑制大语言模型的幻觉。

  在执行层,环境孪生沙箱则为智能体划定安全的行动半径,对工具调用、数据访问和系统操作进行监控 ,出现异常时及时拦截和回滚 。

  对于未来的市场格局,潘剑锋判断,智能体安全将成为每个智能体的标配基础设施。

  但这一市场不会被一家厂商完全垄断。“它可能更像手机行业 ,几家大型厂商占据主要市场,同时不同细分领域仍然存在大量专业化空间 。 ”

  他同时强调,AI厂商并不会因为模型能力增强 ,就直接取代安全公司。安全仍然是一个高度垂直、依赖攻防经验和行业知识的专业领域。但AI的发展 ,已经开始重新划定安全行业的门槛 。

标签:

相关推荐

  • pe市场行情(国内pe费用走势图)

    pe市场行情(国内pe费用走势图)

    塑料板块PP、PE出厂费用一览华东大区:线性部分涨50元/吨,高压部分跌50-100元/吨,低压部分涨50元/吨。华东地区的PE市场费用波动较为复杂,线性产品部分上涨,高压产品部分下跌,低压产品部分上涨。华南大区:线性涨20-50元/吨,高压国产货源涨50-100元/吨,低压涨跌30-50元/吨。塑料期货:连塑PP1909:开盘7825元/...

    2026/07/13
  • 有新增!浙江三地通报/浙江新增3例是哪里

    有新增!浙江三地通报/浙江新增3例是哪里

    浙江疫情还要持续多久〖壹〗、高峰持续时间:预计高位平台期将维持一周左右,随后新增病例数逐步回落,但具体时长需根据防控措施效果与公众配合度动态调整。数据解读与科学依据阳性人员定义:此处统计的“阳性人员”包括核酸检测与抗原检测结果为阳性者,覆盖无症状感染者与轻症患者,符合国家第九版诊疗方案分类标准。〖贰〗、从近来新闻中报道的相关数据和情况来看,浙江宁波这次的...

  • 【31省份新增确诊18例,31省份新增确诊病例15例】

    【31省份新增确诊18例,31省份新增确诊病例15例】

    国家卫健委:昨日新增确诊18例,本土1例在天津月5日0—24时,全国新增确诊病例18例,其中本土病例1例(在天津),境外输入病例17例。具体分布与相关情况如下:新增确诊病例整体情况31个省(自治区、直辖市)和新疆生产建设兵团报告新增确诊病例18例。无新增死亡病例。新增疑似病例2例,均为境外输入病例(均在上海)。月13日0—24时,全国报告新增确诊病例66例...

  • 伦锌期货最新行情(伦锌期货最新行情新浪财经网官方网站报价)

    伦锌期货最新行情(伦锌期货最新行情新浪财经网官方网站报价)

    伦锌期货行情截至2025年8月14日,伦锌期货开盘价28100美元/吨,昨收价28150美元/吨,最新价28150美元/吨,较前日上涨00美元,涨幅0.28%,LME电锌库存48万吨,注销仓单77万吨。近期走势方面,7月下旬至8月上旬费用在2728-2844美元/吨区间波动,8月14日延续小幅反弹。伦锌是指在伦敦金属交易所(LME)上市交易的锌期货合约...

  • 新疆新增病例22例(新疆新增确诊22例)

    新疆新增病例22例(新疆新增确诊22例)

    国家卫健委:30日新增本土病例91例〖壹〗、月30日0—24时,国家卫健委公布全国31个省(自治区、直辖市)和新疆生产建设兵团新增本土确诊病例91例,均位于内蒙古呼伦贝尔市;新增境外输入确诊病例22例,无新增死亡及疑似病例。新增确诊病例分布与特征本土病例:91例全部集中在内蒙古呼伦贝尔市,表明当地存在聚集性疫情传播风险,需重点关注防控措施落实情况。〖贰〗、...

  • 南京最新疫情(南京最新的疫情报告)

    南京最新疫情(南京最新的疫情报告)

    南京市防疫最新政策〖壹〗、武汉可以到南京市栖霞区,但需遵守南京市的防疫政策。具体如下:核酸证明要求:所有外地来宁返宁人员需持有48小时内核酸阴性证明,并在抵宁前或抵宁后立即向所在社区(村)、单位(或所住宾馆)报告,配合信息登记和健康监测。隐瞒不报或拒不配合者需承担法律责任。〖贰〗、南京近来的进出政策需分情况讨论,是否隔离取决于来源地风险等级及个人行程轨迹,...

    2026/07/13
  • 【近期黄金期货行情,近期黄金期货行情走势】

    【近期黄金期货行情,近期黄金期货行情走势】

    黄金费用主连纽约金主连是纽约商品交易所的黄金期货主连合约,代表主力合约的连续费用,通过连接每月最大交易量的合约费用,直观展示黄金长期趋势,是世界黄金市场的核心费用指标。合约属性纽约金主连在COMEX(纽约商品交易所的金属交易部门)上市,以实物黄金为标的,合约乘数为100盎司/手,最小费用波动单位为0.1美元/盎司。纽约金主连是纽约商品交易所的黄金期货主连合...

  • 昨日次粉费用行情/铹粉费用走势图

    昨日次粉费用行情/铹粉费用走势图

    山东小麦玉米的费用〖壹〗、根据近来可查的市场数据,山东玉米费用在近期确实出现了频繁波动,但小麦行情相对稳定,局部呈现跌多涨少的疲软态势。从具体数据来看,2025年12月30日,山东部分深加工企业的玉米收购价与上一日基本持平,例如滨州企业挂牌价为2260元/吨,枣庄2240元/吨,泰安2250元/吨。〖贰〗、小麦费用2025年粮食收购旺季,河南、安徽、江苏、...

  • 2026热门炒股软件推荐:新浪财经APP、同花顺等5款实测对比

    2026热门炒股软件推荐:新浪财经APP、同花顺等5款实测对比

      2026年的A股市场持续升温。据易观千帆数据显示,4月证券服务类APP月活跃用户规模已达1.8亿人,仅3月单月A股新开户就达460.14万户。当移动端交易占比超过90%,一款优秀的炒股软件早已不是简单的行情显示工具,而是集资讯获取、智能决策、全球视野于一体的“AI投资伙伴”。  本文基于数据覆盖、资讯质量、智能工具、交易体验、新手友好度五大核心维度,对...

    2026/07/13
  • 【棕榈主力行情,棕榈股份的股价】

    【棕榈主力行情,棕榈股份的股价】

    棕榈油后期如何走〖壹〗、短期:受供应紧缩及市场情绪推动,棕榈油费用预计维持强势,但需警惕政策反复或马来西亚复产超预期导致的回调风险。中长期:随着供应恢复及累库预期增强,费用可能逐步回落,但需关注基差回归逻辑(如2205合约交割前盘面走强)及月末马棕月度供需数据对市场预期的影响。操作策略:临近月末,建议重点关注马棕供需数据、印尼政策动态及国内库存变化,灵活调...

    2026/07/13
返回顶部