AI是击穿网络安全的矛?还是守护网络安全的盾?
中新网9月21日电(记者 吴家驹)AI是击穿网络安全的矛?还是守护网络安全的盾?
近日,2025年国家网络安全宣传周在昆明开幕,多位网络安全专家在接受中新网采访时,谈及AI给网络安全带来的新风险和新机遇。
360数字安全集团总裁胡振泉认为,AI的安全问题无比复杂,和传统的网络安全问题有着非常大的不同,其中包括:AI生成内容本身的安全性、AI幻觉、提示词注入攻击等问题。
胡振泉进一步表示,当AI变成智能体后,会负责规划很多任务,而如果AI智能体规划的任务执行到很多步后,再发生错乱、随意调度的问题,情况将更加复杂,这是传统网络安全手段无法解决的问题。
天融信科技集团助理总裁张博表示,如今一些大模型被攻击,大模型算法或数据发生泄露,都暴露了大模型在训练、部署、使用等阶段,存在着一定的安全风险。同时,AI降低了网络攻击的门槛,很多攻击者会使用AI,来提升攻击的频度、强度、效率。
奇安信集团副总裁李虎也表示,目前已出现许多用于攻击的AI智能体,甚至已经开始对外提供服务。如果黑客组织使用AI发起攻击,成本会更低,而且更具不可控性。现在大模型的应用越来越广泛,涉及社会生活的方方面面,如果AI的安全性出现问题,将产生非常大的危害。
在南方电网公司数字化部副总经理 亮看来,AI需要慢慢培育。在培育的过程中,如果数据出现问题,一方面可能导致AI智能体的反应速度下降,另一方面,可能导致AI作出的判断存在误差,这对电网企业和新型电力系统来说是致命的。
AI时代,如何应对网络安全挑战?
张博表示,目前AI赋能网络安全,是行业中非常重要的一个研究方向,国内外不少安全公司都在探索AI与安全技术的结合。例如,把大模型融入到安全设备中,与安全平台和云端安全服务进行联动,形成端侧云端协同的基于大模型的智能化运营体系。
“传统的网络安全软件由人编写,而大模型的智力超过人类,因此应该‘以模制模’,即用大模型来解决大模型的安全问题。”胡振泉认为,应该有专门负责安全的大模型,来监督做业务的大模型,并处理其在做业务过程面临的一系列安全问题,大模型的发展应遵循“安全、向善、可信、可控”的原则。
在李虎看来,我们可以构建大模型的安全“红域”,把大模型训练、微调、应用等各个环节,都纳入到红域中心统一管控,然后再进行区隔化管理,把每个区域分而治之,收缩风险边界。同时,我们需要对大模型的提示词、标注数据、知识库数据等,进行监测和审计。
亮表示,为防止AI在应用层面出现偏差,需要有良好的数据治理基础,形成高质量的数据集。同时,需要有专门的团队负责监测AI,并构建监测机制,来使AI朝着我们希望的方向发展。(完)
“极严重灾害”!日本能登地区地震已致213人遇难 中新网1月11日电 综合日媒报道,日本石川县11日公布的最新统计数据显示,能登地区地震已致213人死亡、52人下落不明。 报道称,日本政府在11日举行的内阁会议上还决 “年轻人报复性挤爆3.5分餐厅” 砸了谁的锅 不能仅靠年轻人“挤爆3.5分餐厅”的一身反骨,而要靠净化网络平台信用环境、提升完善评价体系 有一句流行语“股票反着买,别墅靠着海”,意思是要拒绝从众心理,反向操 国家移民管理局:春节假期1351.7万人次出入境 同比增长2.8倍 中新网2月18日电 据国家移民管理局微信公众号消息,2024年春节假期全国边检机关共保障1351.7万人次中外人员出入境,日均169万人次,较2023年春节同期增长2 多地景区人气旺 世界同享中国年 龙年旅游消费迎来火爆开局 本报记者 潘福达 多家景区门票售罄约满、多地酒店“一房难求”、出入境旅游均增长明显……春节假期旅游消费火爆,成为拉动居民消费的主力军。根 拼版照片:上图为20世纪80年代的厦门筼筜湖(资料照片);下图为2024年1月24日拍摄的厦门筼筜湖及周边城市景观(新华社记者姜克红摄,无人机照片)。新华社记者付敏城在海上,海在城中。筼筜湖,犹如镶嵌在厦门岛中央 追加补贴 美国打响全球半导体“军备竞赛” 当地时间2月21日,美国芯片巨头英特尔在加州圣荷西举办首次晶圆代工活动。美国商务部长吉娜・雷蒙多在活动上表示,如果美国想在半导体领域“引领世界”,就要进一步加 。本文链接:AI是击穿网络安全的矛?还是守护网络安全的盾?http://www.sushuapos.com/show-5-70283-0.html
声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。
下一篇: 美国印第安纳州发生枪击事件 已致2死5伤