共守智能体安全底线！AI新治向沙龙献策风险治理、新政落地

当智能体从科幻概念加速融入现实，成为驱动千行百业变革的核心引擎时，一个根本性问题也随之浮出水面：我们该如何为这些日益“自主”的智能系统划定安全边界，确保其发展既蓬勃又可控？

近日，国家相关部门联合印发的《智能体规范应用与创新发展实施意见》，正逢智能体规模化落地的关键窗口期。在此背景下，一场聚焦“如何共守智能体安全底线”的深度研讨——“AI新治向”系列沙龙第二期于广州举行。来自政府部门、司法机关、学术界、产业界及媒体的代表齐聚一堂，共同剖析智能体应用安全风险的底层逻辑，探寻多元共治与创新实践的可行路径。

5月21日上午，聚焦“如何共守智能体安全底线”，“AI新治向”系列沙龙第二期活动在广州举行。

《智能体应用安全风险媒体观察》发布 揭示多重安全风险

广东作为人工智能核心集聚区，备案大模型数量已位居全国前列，堪称智能体落地应用的“超级试验场”和安全治理探索的“前沿阵地”。活动上，南都大数据研究院发布的《智能体应用安全风险媒体观察》，为我们揭开了当前智能体面临的多重安全挑战。

这份观察报告综合测评了一批国内主流AI大模型，重点审视了智能体在内容安全、隐私合规、行为管控等维度的表现。测评结果揭示了一些不容忽视的风险：在内容安全层面，部分API调用及厂商产品存在“防线退守”现象，面对持续的违规指令，系统虽明知规范，却可能逐步妥协甚至曲解规则以输出违规内容；而在隐私合规方面，部分产品对涉及未成年人信息的调取指令未能有效拦截。

南都大数据研究院发布《智能体应用安全风险媒体观察》。

聚焦伦理、隐私、风险 剖析智能体安全痛点

智能体的安全风险究竟新在何处、难在哪里？围绕“智能体新型安全风险如何治理”的议题，三位专家从不同维度进行了深度剖析。

南方科技大学计算机系长聘副教授危学涛将焦点放在了伦理安全上。他指出，随着大模型技术迭代，风险正从显性的内容问题转向更隐性的深层伦理挑战，呈现出“漏网之鱼”般的隐蔽性和“防不胜防”的复杂性。应对之道，在于构建“模型+护栏+国标”三管齐下的系统性治理路径。其中，研发实时、轻量、可配置的行为“护栏”模型以筑牢动态防线，以及加快符合国家标准的可验证治理工具落地，成为打通法规与技术“最后一公里”的关键。

南方科技大学计算机系长聘副教授（研究员、博导）危学涛聚焦“智能体伦理与安全的探索与思考”展开深度分享。

香港科技大学(广州)助理教授钟秉灼则警示了风险从数字空间向物理世界的延伸。他认为，智能体具备自主决策能力，其治理逻辑需要根本性革新，核心在于“将其当作人来管”。这好比教育人需要内在价值观塑造与外在法律约束并行，对智能体而言，也必须构建“内生防护+外部约束”的双重保障体系，既要通过技术加固其内部安全，也要建立独立于模型的外部安全栅栏。

香港科技大学(广州)信息枢纽人工智能学域助理教授、副研究员钟秉灼围绕“智能体物理安全与隐私保护”分享了前沿观点。

粤港澳大湾区生成式人工智能安全发展联合实验室高级工程师莫凡深入剖析了“自主执行类智能体”这一特殊形态带来的挑战。这类智能体高自主、长周期、可交付的特性，在提升效率的同时也放大了安全风险，可能引发失控、提示词攻击、供应链投毒、数据泄露等一系列问题，并带来责任归属的困境。对此，他的建议直指要害：必须明确决策权限边界、加强行为过程管控、建立可追溯机制，从源头推动行业合规。

粤港澳大湾区生成式人工智能安全发展联合实验室高级工程师莫凡聚焦“自主执行类智能体服务安全风险治理”，剖析核心痛点与应对策略。

学界法界齐献策 共探合规治理落地路径

理念清晰之后，如何将合规治理落到实处？在“智能体合规治理体系如何落地”的研讨环节，来自学界与法界的专家提供了从技术评测到司法实践的全景视角。

中山大学软件工程学院院长郑子彬教授指出，传统评测体系已难以匹配智能体的复杂交互特性。为此，其团队构建了一个涵盖8大核心维度的可信能力评测框架，旨在通过自动化检测生成企业专属安全评估报告。这背后的思路，正是推动人工智能治理从单纯的“监管约束”转向“服务赋能”，以专业技术帮助企业在发展中提前排查风险、优化模型。

广东广信君达律师事务所合伙人会议联席主任闪涛从法律实操层面进行了拆解。随着监管逻辑从“内容治理”转向“行为治理”，企业需要守住内生安全、供应链安全、应用衍生风险三道防线，并依据金融、医疗等高敏感场景实施分级管控。他特别强调，产品设计必须落实权限分层、二次确认、日志留存等具体要求，建立起覆盖事前、事中、事后的全链条风控机制。

广东广信君达律师事务所合伙人会议联席主任闪涛从法律风险防范视角，深入解读了智能体合规治理实践路径。

来自司法一线的广州互联网法院法官刘启，则揭示了智能体纠纷审理面临的现实难题：法律主体定性模糊、算法黑箱导致因果关系难以锁定、证据高度集中于技术方造成举证失衡。应对这些挑战，需要推进专业化审理、构建差异化的责任框架，并强化证据规则保障。

广州互联网法院综合审判三庭负责人刘启法官结合司法实践，剖析智能体纠纷痛点并给出裁判规则前瞻。

会议最终凝聚的共识是，智能体安全治理绝非单点突破所能解决，它是一项需要技术、伦理、法律、治理深度协同的系统工程。唯有加快安全评测与标准建设，强化司法的前瞻性回应，推动多元共治真正落地，才能在创新与安全的平衡木上稳步前行，为人工智能产业的高质量发展筑牢根基。