当前位置:

首页 > 硬件相关 > 共守智能体安全底线!AI新治向沙龙献策风险治理、新政落地

共守智能体安全底线!AI新治向沙龙献策风险治理、新政落地

智能体规模化应用面临内容安全、隐私合规与行为管控等新型风险。专家在广州研讨会上指出,需构建技术、伦理与法律协同的治理体系,通过动态防护、标准工具、权限界定及全链条风控等措施,推动多元共治,以平衡创新与安全,筑牢发展根基。

当智能体从科幻概念加速融入现实,成为驱动千行百业变革的核心引擎时,一个根本性问题也随之浮出水面:我们该如何为这些日益“自主”的智能系统划定安全边界,确保其发展既蓬勃又可控?

近日,国家相关部门联合印发的《智能体规范应用与创新发展实施意见》,正逢智能体规模化落地的关键窗口期。在此背景下,一场聚焦“如何共守智能体安全底线”的深度研讨——“AI新治向”系列沙龙第二期于广州举行。来自政府部门、司法机关、学术界、产业界及媒体的代表齐聚一堂,共同剖析智能体应用安全风险的底层逻辑,探寻多元共治与创新实践的可行路径。

5月21日上午,聚焦“如何共守智能体安全底线”,“AI新治向”系列沙龙第二期活动在广州举行。

《智能体应用安全风险媒体观察》发布 揭示多重安全风险

广东作为人工智能核心集聚区,备案大模型数量已位居全国前列,堪称智能体落地应用的“超级试验场”和安全治理探索的“前沿阵地”。活动上,南都大数据研究院发布的《智能体应用安全风险媒体观察》,为我们揭开了当前智能体面临的多重安全挑战。

这份观察报告综合测评了一批国内主流AI大模型,重点审视了智能体在内容安全、隐私合规、行为管控等维度的表现。测评结果揭示了一些不容忽视的风险:在内容安全层面,部分API调用及厂商产品存在“防线退守”现象,面对持续的违规指令,系统虽明知规范,却可能逐步妥协甚至曲解规则以输出违规内容;而在隐私合规方面,部分产品对涉及未成年人信息的调取指令未能有效拦截。

南都大数据研究院发布《智能体应用安全风险媒体观察》。

聚焦伦理、隐私、风险 剖析智能体安全痛点

智能体的安全风险究竟新在何处、难在哪里?围绕“智能体新型安全风险如何治理”的议题,三位专家从不同维度进行了深度剖析。

南方科技大学计算机系长聘副教授危学涛将焦点放在了伦理安全上。他指出,随着大模型技术迭代,风险正从显性的内容问题转向更隐性的深层伦理挑战,呈现出“漏网之鱼”般的隐蔽性和“防不胜防”的复杂性。应对之道,在于构建“模型+护栏+国标”三管齐下的系统性治理路径。其中,研发实时、轻量、可配置的行为“护栏”模型以筑牢动态防线,以及加快符合国家标准的可验证治理工具落地,成为打通法规与技术“最后一公里”的关键。

南方科技大学计算机系长聘副教授(研究员、博导)危学涛聚焦“智能体伦理与安全的探索与思考”展开深度分享。

香港科技大学(广州)助理教授钟秉灼则警示了风险从数字空间向物理世界的延伸。他认为,智能体具备自主决策能力,其治理逻辑需要根本性革新,核心在于“将其当作人来管”。这好比教育人需要内在价值观塑造与外在法律约束并行,对智能体而言,也必须构建“内生防护+外部约束”的双重保障体系,既要通过技术加固其内部安全,也要建立独立于模型的外部安全栅栏。

香港科技大学(广州)信息枢纽人工智能学域助理教授、副研究员钟秉灼围绕“智能体物理安全与隐私保护”分享了前沿观点。

粤港澳大湾区生成式人工智能安全发展联合实验室高级工程师莫凡深入剖析了“自主执行类智能体”这一特殊形态带来的挑战。这类智能体高自主、长周期、可交付的特性,在提升效率的同时也放大了安全风险,可能引发失控、提示词攻击、供应链投毒、数据泄露等一系列问题,并带来责任归属的困境。对此,他的建议直指要害:必须明确决策权限边界、加强行为过程管控、建立可追溯机制,从源头推动行业合规。

粤港澳大湾区生成式人工智能安全发展联合实验室高级工程师莫凡聚焦“自主执行类智能体服务安全风险治理”,剖析核心痛点与应对策略。

学界法界齐献策 共探合规治理落地路径

理念清晰之后,如何将合规治理落到实处?在“智能体合规治理体系如何落地”的研讨环节,来自学界与法界的专家提供了从技术评测到司法实践的全景视角。

中山大学软件工程学院院长郑子彬教授指出,传统评测体系已难以匹配智能体的复杂交互特性。为此,其团队构建了一个涵盖8大核心维度的可信能力评测框架,旨在通过自动化检测生成企业专属安全评估报告。这背后的思路,正是推动人工智能治理从单纯的“监管约束”转向“服务赋能”,以专业技术帮助企业在发展中提前排查风险、优化模型。

广东广信君达律师事务所合伙人会议联席主任闪涛从法律实操层面进行了拆解。随着监管逻辑从“内容治理”转向“行为治理”,企业需要守住内生安全、供应链安全、应用衍生风险三道防线,并依据金融、医疗等高敏感场景实施分级管控。他特别强调,产品设计必须落实权限分层、二次确认、日志留存等具体要求,建立起覆盖事前、事中、事后的全链条风控机制。

广东广信君达律师事务所合伙人会议联席主任闪涛从法律风险防范视角,深入解读了智能体合规治理实践路径。

来自司法一线的广州互联网法院法官刘启,则揭示了智能体纠纷审理面临的现实难题:法律主体定性模糊、算法黑箱导致因果关系难以锁定、证据高度集中于技术方造成举证失衡。应对这些挑战,需要推进专业化审理、构建差异化的责任框架,并强化证据规则保障。

广州互联网法院综合审判三庭负责人刘启法官结合司法实践,剖析智能体纠纷痛点并给出裁判规则前瞻。

会议最终凝聚的共识是,智能体安全治理绝非单点突破所能解决,它是一项需要技术、伦理、法律、治理深度协同的系统工程。唯有加快安全评测与标准建设,强化司法的前瞻性回应,推动多元共治真正落地,才能在创新与安全的平衡木上稳步前行,为人工智能产业的高质量发展筑牢根基。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
作者最新文章
硬件相关
相关文章 更多
显示器色温怎么调不刺眼?色温调多少看着最舒服
显示器色温怎么调不刺眼?色温调多少看着最舒服

详解显示器色温的舒适调节区间、刺眼的核心诱因,以及在不同使用场景与环境光下的具体调节步骤与校准方法。

显卡风扇不转怎么回事判断是否正常及解决方法
显卡风扇不转怎么回事判断是否正常及解决方法

发现显卡风扇不转先别慌,这很可能是正常的智能启停功能。本文详解如何区分待机静音与硬件故障,提供从软件检测到物理清理的完整解决思路。

笔记本加内存条后无法开机怎么办及解决方法
笔记本加内存条后无法开机怎么办及解决方法

笔记本加装新内存后遇到黑屏或无法开机?不要慌张,本文通过重新插拔、清洁金手指、单根测试等具体操作步骤,帮你快速判断是安装失误还是硬件不兼容,并给出相应解决办法。

电脑主机前置usb不能用怎么解决排查修复教程
电脑主机前置usb不能用怎么解决排查修复教程

针对电脑主机前置USB接口无法识别设备的问题,本文提供一套基于因果逻辑的排查流程。涵盖检查机箱内部USB针脚连接、验证BIOS中USB控制器状态、更新芯片组驱动以及排除供电不足等常见原因,帮助用户快速恢复接口功能。

无线鼠标充不进电解决办法及故障排查步骤
无线鼠标充不进电解决办法及故障排查步骤

遇到无线鼠标充不进电的问题,不要急于更换设备。本文详解从清理接口氧化层、更换数据线到检测电池电压的完整排查流程,帮助你判断是临时故障还是硬件损坏。

蓝牙游戏手柄连接教程吃鸡
蓝牙游戏手柄连接教程吃鸡

想知道如何用蓝牙手柄玩吃鸡游戏?本文详细讲解手机蓝牙手柄的连接步骤、主流映射软件的使用方法以及实战中的键位布局技巧,助你提升射击手感,同时解析外设玩家的匹配机制与注意事项。

游戏手柄蓝牙连接为何每次都要重连原因排查与解决方法
游戏手柄蓝牙连接为何每次都要重连原因排查与解决方法

本文深入分析游戏手柄蓝牙频繁断开且需重连的根本原因,涵盖电池电压检测、操作系统电源管理策略及驱动冲突。通过具体的系统设置调整和固件更新步骤,解决蓝牙握手失败问题,恢复手柄的稳定连接状态。

显示器画面模糊抖动怎么解决及排查方法教程
显示器画面模糊抖动怎么解决及排查方法教程

遇到显示器画面模糊或抖动时,可通过检查视频连接线、调整系统分辨率与刷新率、更新显卡驱动等步骤进行排查和修复。

小米智能门锁换电池后怎么开机
小米智能门锁换电池后怎么开机

小米智能门锁更换新电池后无法开机或屏幕不亮?本文详解电池极性检查、金属触点清洁及强制重启方法,帮你快速解决供电问题,让门锁恢复正常使用。

电视机声音怎么连接到外置音响
电视机声音怎么连接到外置音响

想让电视声音更震撼?本文详解如何通过HDMI ARC、光纤、蓝牙和3.5mm接口将电视连接至外置音响,包含具体设置步骤与常见问题排查,助你轻松打造家庭影院。

查看更多
精品专题 更多
装机必备
装机必备

正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

Windows
Windows

正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

PDF教程
PDF教程

正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

Mac软件 更多
Shapr3D macOS版
Shapr3D macOS版
Mac

Shapr3D是一款面向工业设计、机械工程、建筑概念和三维打印工作流的CAD软件。Mac版采用Parasolid建模内核,支持草图约束、实体建模、工程图、可视化渲染及常见CAD格式交换,并可通过账户在多台设备之间同步项目。

REAPER macOS版
REAPER macOS版
Mac

REAPER是Cockos开发的数字音频工作站,提供多轨音频与MIDI录制、剪辑、处理、混音和母带制作工具。Mac版兼容Intel与Apple芯片,支持AU、VST、VST3、CLAP等插件格式,并提供高度可定制的工作流程。

Ableton Live macOS版
Ableton Live macOS版
Mac

Ableton Live 是面向音乐制作人与现场表演者的数字音频工作站,提供编曲视图、独具特色的现场视图、音频录制、MIDI创作、实时变速、乐器及效果器。Mac版原生支持Apple芯片,并可连接音频接口、MIDI控制器和第三方插件。

WINDOWS 更多
3dmax(3ds max)
3dmax(3ds max)
Windows

Autodesk 3ds Max 是一款专业的三维建模、动画与渲染软件,广泛应用于建筑可视化、游戏开发、影视动画、广告设计和产品展示等领域。

photoshop
photoshop
Windows、macOS 、 iPad

Photoshop 2026 是 Adobe 推出的专业图像处理与视觉设计软件,支持 Windows、macOS 和 iPad 等平台,广泛应用于摄影修图、电商设计、平面海报、数字绘画及视觉合成等创作场景。

Blender
Blender
Windows、macOS 和 Linux

Blender 是一款免费开源、跨平台的专业 3D 创作软件,集建模、动画、渲染、视频编辑与视觉合成等功能于一体,广泛应用于影视动画、游戏设计和建筑可视化等领域。软件支持 Cycles 物理渲染器与 Eevee 实时渲染引擎,并提供多边形建模、骨骼绑定、物理模拟等专业工具。Blender 兼容 Windows、macOS 和 Linux 系统,安装包轻巧、运行流畅,依托活跃的全球开发者社区持续更新,是从初学者到专业创作者都值得选择的正版 3D 创作工具。