学习目标
企业可系统性应对AI技术带来的数据安全挑战,同时确保全员在人工智能时代的安全防护能力,实现安全与发展的平衡。
课程大纲
一、AI技术引发的数据安全问题与应对措施
1. AI技术及其深度应用
讲解当前AI种类与行业应用的特点等
- 2. AI技术的主要安全风险
2.1. AI合成技术
- 1) 风险表现:攻击者利用AI生成逼真的伪造视频、语音,冒充企业高管或合作伙伴实施诈骗。
- 2) 安全隐患:生物特征数据(人脸、声纹)泄露可能导致身份冒用,威胁企业资金与商业机密安全。
2.2. 数据投毒与算法攻击
- 1) 风险表现:攻击者通过污染训练数据(如加入恶意样本),导致AI模型输出错误结果。
例如,微软聊天机器人Tay因数据投毒发布不当言论。
- 2) 安全隐患:模型决策失效可能引发业务系统瘫痪或法律纠纷。
2.3. 生成式AI滥用
- 1) 风险呈现:员工对AI工具(例如ChatGPT)的滥用可能引发敏感数据的泄露风险。
相关案例表明,曾有员工借助AI助手非法窃取客户数据,并将其转移至竞争对手处。
- 2) 安全风险:生成式AI存在通过提示注入攻击获取权限内数据的可能性,进而加剧内部数据泄露的风险。
- 3. 企业数据安全保障策略
3.1. 技术防护
- 1) 动态验证机制:在视频通话场景中,通过向对方发起特定指令,要求其执行预先设定的指定动作(例如眨眼、遮挡面部等),以此作为识别AI换脸行为的关键手段。
通过实时捕捉和分析对方执行动作的特征及细节,与正常人类的生理动作表现进行比对和分析,从而有效识别可能存在的AI换脸风险,确保视频通话的真实性和安全性。
- 2) 数据加密与权限控制:严格遵循最小权限原则,对AI工具访问敏感数据的权限进行精细
管理
和严格控制。
具体而言,依据不同业务场景和安全需求,精确界定AI工具在运行过程中对各类敏感数据的访问范围,仅授予其完成特定任务所必需的最低限度权限。
同时,采用先进的数据加密技术,对敏感数据在存储和传输过程中进行高强度加密处理,确保数据在任何环节都具备较高的保密性和完整性,防止数据被未经授权的访问、篡改或泄露。
- 3) AI模型安全审计:建立定期的AI模型安全审计机制,对AI模型的训练数据完整性进行全面、深入的检测和评估。
在训练数据的收集、整理、存储以及使用过程中,运用专业的技术手段和工具,对数据的质量、准确性、一致性等方面进行严格检查,及时发现并识别可能存在的数据投毒风险以及模型自身存在的安全漏洞。
通过持续的安全审计和风险评估,不断完善和优化AI模型的安全防护体系,保障AI系统的可靠运行和数据安全。
3.2. 管理措施
- 1) 员工培训:定期组织AI安全演练活动,以切实提升员工对深度伪造及钓鱼邮件的精准识别能力。
- 2) 数据分类分级:借助自动化工具对敏感数据进行准确标识,并据此制定具有针对性的差异化保护策略。
二、国家政策法规解读与企业合规要求
- 1. 关键政策法规概览
1.1. 《数据安全法》
- 1) 核心要求:严格规范数据处理活动,清晰界定数据安全责任主体,全面强化数据出境安全评估机制。
- 2) 企业合规重点:构建完备的数据全生命周期管理制度,切实保障数据在收集、存储及使用等各环节的合法合规性。
1.2. 《个人信息保护法》
- 1) 核心要求:严格禁止过度收集个人信息的行为,对于个人信息的处理规则必须予以明确公示,并在获得用户明确同意的前提下方可进行相关操作。
在2025年开展的专项行动中,将重点整治应用程序(App)违规收集生物识别信息等一系列突出问题。
- 2) 企业合规要点:着力优化隐私政策,为用户提供便捷的拒绝个性化推送服务选项,同时进一步完善用户数据的删除以及注销相关功能。
1.3. 《人脸识别技术应用安全管理办法》(2025年6月实施)
- 1) 核心要求:在公共场所应用人脸识别技术时,应当进行显著提示,并对相关数据采取加密保护措施,同时严禁强制采集人脸信息。
- 2) 企业合规重点:在门禁管理、考勤记录等应用场景中,应优先采用替代性技术方案,尽量减少非必要的生物信息采集行为。
2. 大数据
安全管理指南(国密标准)
核心原则:数据最小化、责任不随数据转移、最小授权。
实施建议:
a. 制定数据分类标签体系,明确高价值数据的保护优先级。
b. 定期开展数据安全影响评估,识别并修复高风险环节。
三、个人数据安全防护与全员意识提升
- 1. 个人防护“四要四不要”
1.1. “四要”
- 1) 设备密码勤更换:使用12位以上混合字符密码,并定期更新。
- 2) 杀毒软件及时更新:防范新型木马与勒索软件攻击。
- 3) 警惕智能家居漏洞:选择正规品牌,禁用非必要联网功能。
- 4) 当心AI诈骗:对索要生物信息或紧急转账的要求多途径核实。
1.2. “四不要”
- 1) 不连陌生WiFi:避免连接公共网络传输敏感数据。
- 2) 不点钓鱼链接:警惕仿冒银行、政府的短信与邮件。
- 3) 不扫不明二维码:防止恶意程序植入手机。
- 4) 不晒个人信息:避免在社交平台暴露身份证号、行程信息等。
2. 全员安全意识培养
- 1) 案例教学:AI诈骗话术与流程,提升员工警惕性。
- 2) 模拟演练:开展钓鱼邮件识别、AI换脸检测实战训练。
- 3) 文化渗透:将数据安全纳入绩效考核,鼓励员工举报安全隐患。
四、企业行动建议
- 1.企业层面:构建“技术+管理+合规”三位一体的防御体系,重点关注AI模型安全与权限治理。
- 2.个人层面:遵循最小化信息共享原则,强化生物特征数据保护意识。
- 3.政策响应:紧跟国家法规动态,定期开展合规自检与第三方审计。
- 2. AI技术的主要安全风险
- 2.1. AI合成技术
- 2.2. 数据投毒与算法攻击
- 2.3. 生成式AI滥用
- 3. 企业数据安全保障策略
- 3.1. 技术防护
- 3.2. 管理措施
- 1. 关键政策法规概览
- 1.1. 《数据安全法》
- 1.2. 《个人信息保护法》
- 1.3. 《人脸识别技术应用安全管理办法》(2025年6月实施)
- 1. 个人防护“四要四不要”
- 1.1. “四要”
- 1.2. “四不要”