基于MaxCompute的大数据安全方案

随着法律的完善&＃xff0c;数据安全&＃xff0c;信息安全&＃xff0c;网络安全&＃xff0c;升级成国家安全&＃xff0c;所以数据安全不管对用户&＃xff0c;还是对公司也都会变的越来越重要。做为大数据云数仓解决方案的领导者&＃xff0c;阿里云MaxCompute在安全体系上也做了很多特性&＃xff0c;本文给大家简单介绍下MaxCompute关于数据安全的一些能力。

安全体系介绍

安全体系不是一个系统&＃xff0c;是一系列的系统联合才能做到大数据平台的数据安全要求&＃xff0c;主要包括&＃xff1a;

1. 事前准备&＃xff0c;包括数据打标&＃xff0c;白/黑名单&＃xff0c;权限分配&＃xff0c;加密算法和脱敏算法准备。
2. 事中处理&＃xff0c;包括数据加密/解密&＃xff0c;白名单过滤&＃xff0c;数据扫描&＃xff0c;数据实时告警。
3. 事后审计&＃xff0c;包括数据使用日志审计&＃xff0c;数据离线报表监控等。

安全体系架构

数据安全体系不仅需要各个系统配合使用&＃xff0c;同时也需要不同部门进行流程化管理&＃xff0c;让数据能在合理授权下使用&＃xff1a;

• 其中就会涉及到数据合规部门&＃xff0c;对数据进行打标&＃xff0c;对数据规则进行配置&＃xff0c;权限设置以及白名单管理等工作&＃xff1b;
• 大数据平台要按照合规人员设置的规则自动化对数据进行加密或者脱敏&＃xff0c;然后提供给数据使用者使用&＃xff1b;
• 数据安全人员同时要对每个敏感数据的使用都需要有实时的数据监控&＃xff0c;以及数据事后的定时审计。

本文主要介绍阿里大数据平台的数据存储加密和数据脱敏两块&＃xff0c;目前阿里大数据平台MaxCompute联合KMS平台在对数据上云时可以对数据进行加密存储&＃xff0c;支持AES256、AESCTR和RC4算法&＃xff0c;在客户使用时自动解密&＃xff0c;做到客户无感知的数据保护。

同时MaxCompute联合Dataworks和数据安全保护伞做到敏感数据脱敏使用&＃xff0c;用户可以在数据保护伞里对数据进行打标配置&＃xff0c;风险规则定义&＃xff0c;脱敏规则配置以及白名单设计等操作&＃xff0c;MaxCompute会自动对已经打标的数据&＃xff0c;按照脱敏规则对指定的敏感数据进行脱敏显示。

适用场景

场景一&＃xff1a;客户个人信息保护

个人信息保护场景&＃xff0c;随着相关法律的出台&＃xff0c;很多游戏公司都要需要录入个人身份证号等敏感信息&＃xff0c;如果客户的个人信息泄露是很严重的数据安全事故&＃xff0c;所以类似身份证号等个人信息的保护就变的非常重要&＃xff0c;这些信息只有客户自己可以使用&＃xff0c;或者客户授权的情况下才可以使用&＃xff0c;但是在企业运营时&＃xff0c;需要对这些信息进行加工&＃xff0c;匹配等&＃xff0c;所以在所有加工过程中都需要加密或者脱敏操作。

场景二&＃xff1a;企业内部信息保护

大部分公司内部有财务&＃xff0c;个人薪资等很多敏感数据&＃xff0c;但是公司正常运营&＃xff0c;需要这些数据在大数据平台进行加工计算&＃xff0c;最后输出报表&＃xff0c;在中间加工过程中&＃xff0c;包括数据研发人员&＃xff0c;测试人员&＃xff0c;产品经理等&＃xff0c;都不能触碰明文数据&＃xff0c;需要对数据进行脱敏操作。

适合客群

本文适合企业已经使用了Maxcompute产品的数据管理人员&＃xff0c;数据治理人员&＃xff0c;数据研发人员以及数据安全合规人员等。

数据加密

MaxCompute支持通过密钥管理服务KMS&＃xff08;Key Management Service&＃xff09;对数据进行加密存储&＃xff0c;提供数据静态保护能力&＃xff0c;满足企业监管和安全合规需求。

前提条件

• • 阿里云服务账号&＃xff1b;
  • 已经开启KMS密钥管理服务。

操作步骤

1. 进入密钥管理服务开通页&＃xff0c;选中密钥管理服务服务协议&＃xff0c;单击立即开通&＃xff0c;开通KMS服务。

2.登录DataWorks控制台&＃xff0c;在左侧导航栏&＃xff0c;单击工作空间列表。

3.在工作空间列表页面上方选择区域后&＃xff0c;单击创建工作空间。在创建工作空间面板&＃xff0c;配置基本配置信息&＃xff0c;单击下一步&＃xff0c;详情请参见创建项目空间。

4.在创建工作空间面板的选择计算引擎服务区域&＃xff0c;选中MaxCompute。

5.在请进行ODPS服务账号授权对话框&＃xff0c;单击授权。

6.在新打开的云资源访问授权页面&＃xff0c;单击同意授权。

7.返回请进行ODPS服务账号授权对话框。关闭请进行ODPS服务账号授权对话框&＃xff0c;在创建工作空间面板的选择计算引擎服务区域&＃xff0c;重新选中MaxCompute&＃xff0c;单击下一步。

8.在创建工作空间面板&＃xff0c;配置引擎详情信息。选中加密&＃xff0c;开启数据加密功能。以创建简单模式的工作空间为例。

9.单击创建工作空间&＃xff0c;完成创建。开启数据加密功能后&＃xff0c;MaxCompute会自动完成项目数据读写过程中的加密或解密操作。

数据脱敏

数据保护伞是一款数据安全管理产品&＃xff0c;为您提供数据发现、数据脱敏、数据水印、访问控制、风险识别、数据审计、数据溯源等功能。接下去为您介绍如何开通、使用数据保护伞。

前提条件

• • 阿里云服务账号&＃xff1b;
  • 已经开启Dataworks空间。

操作步骤

1. 登录DataWorks控制台&＃xff0c;进入设置&＃xff0c;启用页面查询内容脱敏&＃xff1a;

2.单击左上方的图标&＃xff0c;选择全部产品 > 数据治理 > 数据保护伞。

1. 数据分级分类设置&＃xff0c;系统会字段1000&＃43;数据分类&＃xff0c;在没有特殊要求的情况下&＃xff0c;大部分情况下可以用默认分类&＃xff0c;同时也支持自定义客户自己的分级分类。
2. 数据识别类型&＃xff0c;系统已经自带很多1000&＃43;识别类型&＃xff0c;没有特殊要求&＃xff0c;可以使用自带识别自动生成数据识别模型&＃xff0c;同时也支持通过您提供的样本字段&＃xff0c;进行模型训练&＃xff0c;帮助您寻找目标字段的内容特征&＃xff0c;生成相应的规则模型。
3. 数据脱敏规则定义&＃xff0c;用户可以给指定的数据字段类型进行定义脱敏规则&＃xff0c;目前支持脱敏方式有假名&＃xff0c;Hash&＃xff0c;掩盖三种。

6.数据查询会进行自动掩盖&＃xff1a;

白名单

目前数据保护伞对于数据脱敏部分&＃xff0c;支持给用户添加白名单&＃xff0c;如果在白名单里的客户&＃xff0c;可以无视脱敏规则&＃xff0c;可以查到明文数据。

数据发现

目前数据保护伞对于数据脱敏部分&＃xff0c;支持系统自动扫描数据&＃xff0c;并把风险统计数据显示出来。

数据风险识别

目前数据保护伞对于数据脱敏部分&＃xff0c;支持用户自定义风险行为&＃xff0c;并对风险进行统一查询显示。

数据审计

目前数据保护伞对于数据脱敏部分&＃xff0c;用户可以查询数据风险处理情况&＃xff0c;对数据安全处理进行审计。

总结

本文只是对大数据平台的安全性做了简单的梳理&＃xff0c;很多细节因为篇幅没有细讲&＃xff0c;有兴趣的同学可以参考官方文档。

• 数据加密配置
• 数据脱敏配置

目前阿里大数据平台已经对数据的存储加密&＃xff0c;以及数据脱敏显示上做了比较多的能力&＃xff0c;但是在数据还不能做到列级&＃xff0c;行级甚至单元格级别的加密&＃xff1b;在数据识别扫描上也不支持手动根据自己的规则进行扫描&＃xff1b;在数据全渠道接入脱敏也没有覆盖所有Region&＃xff1b;在数据安全使用上&＃xff0c;数据监控以及数据审计上做的也不是很完善等等问题&＃xff0c;后续在安全上加入更多能力&＃xff0c;让用户可以安心&＃xff0c;放心&＃xff0c;省心的在阿里云大数据平台上使用数据。

常见问题

• Maxcompute数据存储加密后&＃xff0c;是否可以被hologres外表访问&＃xff1f;

答&＃xff1a;是可以的&＃xff0c;但是在存储加密时需要选用自带密钥的加密方式。

• Maxcompute数据存储加密后&＃xff0c;需要用户手工解密吗&＃xff1f;

答&＃xff1a;不需要&＃xff0c;系统会在查出来时自动解密。

• 在数据保护伞中已经配置了数据分类&＃xff0c;脱敏规则&＃xff0c;为什么脱敏还不生效&＃xff1f;

答&＃xff1a;先要在Dataworks的设置中开启页面查询内容脱敏。

作者&＃xff1a;阿里云智能 漠凡

原文链接

本文为阿里云原创内容&＃xff0c;未经允许不得转载。