检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
创建Hive脱敏任务 创建Hive脱敏任务后,可以对Hive类型数据的敏感信息进行脱敏。 本章节将介绍如何创建Hive脱敏任务。 前提条件 已完成云资源委托授权,具体请参见云资产委托授权/停止授权。 已授权Hive数据库,具体请参见授权大数据资产。 已在“敏感数据识别”中完成了敏
据,则可以不用修改。 修改Hive用户权限 为能正常对MRS_Hive数据进行数据水印相关操作,必须通过Ranger管理员为Hive用户进行相关的权限设置。 修改Hive用户权限 登录管理控制台。 单击左上角的,选择区域或项目。 在左侧导航树中,单击,选择“大数据 > MapReduce服务
创建MRS脱敏任务后,可以对指定数据的敏感信息脱敏。 本章节将介绍如何创建MRS脱敏任务。 前提条件 已完成云资源委托授权,具体请参见云资产委托授权/停止授权。 已授权Hive数据库,具体请参见授权大数据资产。 已进行MRS_Hive的相关权限配置,修改Hive用户权限。 已在“敏感数据识别”中完成了敏
已进行DWS和MRS_Hive权限配置,(可选)配置DWS和MRS Hive。 约束条件 DWS数据只支持smallint,integer,bigint,float4,float8,varchar,text,char类型嵌入水印。 MRS-HIVE数据只支持smallint,
”、“Hive”、“MRS_HIVE”。 数据库实例 单击下拉框选择数据库实例。 添加配置项 单击可以增加配置项。 单击“下一步”,进入“子任务配置”页面: 选择开启或关闭“扫描用户表”。 选择开启或关闭“扫描系统表”,例如包括infomation_schema。 选择开启或关闭“扫描列约束”,包括主键,是否唯一。
有已授权的RDS/DWS数据库,具体请参见授权数据库资产。 有已授权的MRS数据库,具体请参见授权大数据资产。 已进行DWS和MRS_Hive权限配置,(可选)配置DWS和MRS Hive。 约束条件 源文件格式必须为csv文件且大小不能超过20M。 表数据记录预估在1500行以上。 csv文件内容格
有已授权的RDS/DWS数据库,具体请参见授权数据库资产。 有已授权的MRS数据库,具体请参见授权大数据资产。 已进行DWS和MRS_Hive权限配置,(可选)配置DWS和MRS Hive。 约束条件 源文件格式必须为csv文件且大小不能超过20M。 表数据记录预估在1500行以上。 csv文件内容格
开启/停止脱敏任务 功能介绍 开启/停止脱敏任务 调用方法 请参见如何调用API。 URI POST /v1/{project_id}/sdg/server/mask/dbs/templates/{template_id}/operation 表1 路径参数 参数 是否必选 参数类型
开启实例 以下场景需要启动实例: 当实例的“运行状态”为“关闭”时,如果需要登录使用API数据安全防护实例,则需执行启动实例操作。 当实例的“运行状态”为“异常”时,如果需要登录使用API数据安全防护实例,可尝试执行启动实例操作。 操作步骤 登录管理控制台。 单击左上角的,选择区域或项目。
如果源站地址选择域名,不输入DNS地址也可以输入服务端IP。 源站路径 源站url的前缀。 负载均衡策略 选择代理访问的负载均衡策略,当源站地址有多个时将采用配置的负载均衡策略进行访问。 启用状态 选择是否启用该应用代理服务。 单击“确定”。 添加完成后,访客通过配置的应用域名/IP(例如example
API数据安全防护”,进入“API数据安全防护”界面。 单击实例名称,进入实例详情界面,包含监测分析和数据库安全网关实例详情两块内容,详情参见如下内容。 监测分析 负载均衡 CPU使用率和内存使用率。 资源使用 系统盘读IO和系统盘写IO。 磁盘读写 系统盘读IO和系统盘写IO。 宽带使用 磁盘读宽带和磁盘写宽带。
DSC支持对数据库、ES、MRS以及Hive等数据类型的脱敏任务,本节以创建数据库静态脱敏任务为例进行演示,如需了解其他脱敏相关的方法请参见: ES脱敏,请参见创建ES脱敏任务。 MRS脱敏,请参见创建MRS脱敏。 Hive脱敏,请参见创建Hive脱敏。 HBase脱敏,请参见创建HBase脱敏。
DSC通过内置和自定义脱敏算法,实现对RDS、ES、MRS、Hive数据进行脱敏,一般情况下,脱敏时长如表2所示。 表2 脱敏时长 数据源 数据量 脱敏时长 RDS(关系型数据库) 1000W行 40分钟 Elasticsearch实例 1000Wdoc 40分钟 MRS_HIVE 1000W行 40分钟 父主题:
开启多账号管理功能 开启多账号管理功能后,安全管理员在安全运营账号中对所有成员账号进行统一的数据安全防护,而无需逐个登录到成员账号,本章介绍如何开启多账号管理功能。 前提条件 开通组织服务,请参见开通组织服务。 授权DSC为可信服务,请参见授权为可信服务。 该账号为管理员或者委托
如果源站地址选择域名,不输入DNS地址也可以输入服务端IP。 源站路径 源站url的前缀。 负载均衡策略 选择代理访问的负载均衡策略,当源站地址有多个时将采用配置的负载均衡策略进行访问。 启用状态 选择是否启用该应用代理服务。 高级配置 如果源站应用系统有高级认证,可在此处配置应用请求头中的
数据安全中心可以为MapReduce服务上的Hive资产提供敏感数据自动识别分类和数据保护服务。 与弹性负载均衡的关系 数据安全中心与弹性负载均衡(Elastic Load Balance ,以下简称ELB)绑定,DSC通过ELB获取加密通信状态。 与消息通知服务的关系 消息通知服务(Simple
全状况。可协助您快速发现风险资产并快速进行风险处理操作。 资产可视化 数据服务资产:涵盖了云上所有数据资产,包含OBS、RDS、CSS、Hive以及Hbase等。 数据风险:数据关联分级分类结果,一览展示各个数据风险级别。 分区展示:根据云上资源VPC展示各个资产所在区域,和业务区域关联。
数据(RDS、DWS等)和非结构化数据(OBS)进行扫描、分类、分级,解决数据“盲点”,以此做进一步安全防护。 使用约束 对于MRS中的HIVE数据,在敏感数据识别时,当前仅支持“匹配类型”为“规则匹配”、“规则”为“内容 > 包含”的方式。 使用流程 图1 流程图 表1 功能介绍
至“失败”上查看失败原因或者参照如何排查添加数据库连通性失败?解决。 拉取实例下的元数据 MRS_Hive实例下数据库授权个数大于0时,在Hive实例列表“操作”列,单击“更多 > 刷新”会自动创建元数据任务拉取实例的库、表、列信息。 添加Hive实例时,如果打开自动创建元数据任
le、DWS Elasticsearch脱敏 大数据 Elasticsearch Hive脱敏 Hive HBase脱敏 HBase DLI脱敏 大数据 DLI MRS脱敏 MRS MRS_HIVE OBS脱敏 OBS OBS桶文件 数据水印功能支持的数据源类型 表4 数据水印功能支持的数据源类型