检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Formation DLF、 MRS_RDS_FOR_MYSQL代表MRS云数据库RDS(for MySQL)、 OPEN_FOR_MYSQL代表开源HiveMetastore(for MySQL)、 MRS_RDS_FOR_PG代表MRS云数据库RDS(for PostgreSQL)、 M
Formation DLF、 MRS_RDS_FOR_MYSQL代表MRS云数据库RDS(for MySQL)、 OPEN_FOR_MYSQL代表开源HiveMetastore(for MySQL)、 MRS_RDS_FOR_PG代表MRS云数据库RDS(for PostgreSQL)、 M
Formation DLF、 MRS_RDS_FOR_MYSQL代表MRS云数据库RDS(for MySQL)、 OPEN_FOR_MYSQL代表开源HiveMetastore(for MySQL)、 MRS_RDS_FOR_PG代表MRS云数据库RDS(for PostgreSQL)、 M
选择待迁移数据的数据源类型。 DLF：第三方数据湖构建（Data Lake Formation，DLF） MRS云数据库RDS(for MySQL) 开源HiveMetastore(for MySQL) MRS云数据库RDS(for PostgreSQL) MRS本地数据库 JDBC URL 待迁移元数据
Table-Generating Functions），用于操作单个输入行，产生多个输出行。 分区（Partition） 分区是对数据表按照行维度进行分割，目的是为了在特定SQL操作中减少数据读写的总量以缩减响应时间。 父主题： 基本概念
函数（Function） 在SQL查询中使用函数对数据进行特定处理，包括内置函数和用户自定义函数UDF。 分区（Partition） 分区是对数据表按照行维度进行分割，目的是为了在特定SQL操作中减少数据读写的总量以缩减响应时间。 已发布区域：以控制台实际上线区域为准。 元数据基本概念 管理元数据 数据权限授权
购买LakeFormation实例 参数 参数说明 样例 类型 选择实例类型。 共享：共享型实例之间，通过资源复用换取CCE集群或GaussDB(for MySQL)实例等资源的使用率最大化。 独享：按照每秒查询率（QPS）上限和元数据使用量进行计费。 独享 计费模式 实例的计费模式。 按需收费：按
执行以下命令重新编译Hive内核源码。 mvn clean install -DskipTests=true 准备并补充替换Hive内核相关的jar包。 获取以下jar包，并补充或替换到Hive安装环境的lib目录下。 表1 获取Hive环境所需jar包 序号 jar包名称 获取途径 1 spring-web-5
500 00011052 ZooKeeper健康检查失败。 请检查ZooKeeper服务的状态。 500 00011053 MySQL健康检查失败。 请检查MySQL服务的状态。 500 00011054 OBS健康检查失败。 请检查OBS服务的状态。 500 00011055 集群健康检查失败
at-client”的target目录下获取“lakeformation-lakecat-client-1.0.0.jar”。 准备并补充替换Hive内核相关的jar包。 如仅使用SparkCatalogPlugin方式对接，不使用MetastoreClient方式对接，本步骤可省略。
PARTIAL_MASK：遮掩部分数据。 REDACT：修订原有列的数据。 HASH：使用哈希算法加密。 NULLIFY：用NULL值替换原值。 UNMASKED：原样显示。 DATA_ONLY_SHOW_YEAR：仅显示日期字符串的年份部分。 CUSTOM：用户自定义脱敏规则。
配置Hive对接LakeFormation 修改Hive服务端安装环境的“conf”目录的hive-site.xml文件，添加如下内容（部分参数值根据提示进行替换）： <property> <name>hive.metastore.session.client.class</name> <value>com
String data mask type：REDACT修订， HASH哈希加密，PARTIAL_MASK部分掩码，NULLIFY用NULL值替换原值，UNMASKED原样显示，DATA_ONLY_SHOW_YEAR仅显示日期字符串的年份部分，CUSTOM自定义脱敏规则。 枚举值： REDACT
erde name”、“SerializationLib”参数。 分隔符 数据源格式为“Csv”时，需设置字段分隔符。目前支持以下类型： 逗号（,） 竖线（|） 分号（;） Tab（\u0009） Ctrl-A（\u0001） 描述 所创建表的描述信息。 长度为0~4000字节，1个中文字符对应3个字节。
要配置多行： # 指定catalog实现类，必选配置（spark_catalog_name为spark中的catalog名称。根据实际需要替换，下同） spark.sql.catalog.${spark_catalog_name}=com.huawei.cloud.dalf.lakecat
主体名。 resource ResourceInfo object 资源信息。 resource_name String 要求用点分格式进行分割。 permissions Array of strings 权限列表：ALL、CREATE、ALTER、DROP、DESCRIBE、EX
String data mask type：REDACT修订， HASH哈希加密，PARTIAL_MASK部分掩码，NULLIFY用NULL值替换原值，UNMASKED原样显示，DATA_ONLY_SHOW_YEAR仅显示日期字符串的年份部分，CUSTOM自定义脱敏规则。 枚举值： REDACT
String data mask type：REDACT修订， HASH哈希加密，PARTIAL_MASK部分掩码，NULLIFY用NULL值替换原值，UNMASKED原样显示，DATA_ONLY_SHOW_YEAR仅显示日期字符串的年份部分，CUSTOM自定义脱敏规则。 枚举值： REDACT
概述 欢迎使用LakeFormation。使用LakeFormation实例，您可以通过控制台、API实现对数据湖的元数据进行统一的生命周期管理，无需再通过大数据集群的SQL引擎来管理。 您可以使用本文档提供API对LakeFormation进行相关操作，如创建删除LakeFor
元数据发现 操作场景 当数据存储在OBS并行文件系统中，而在LakeFormation还未与对应的元数据关联时，可以通过元数据发现，来构造这些数据对应的元数据信息，从而支撑SQL引擎或者用户的应用程序的计算与分析。 当前元数据发现特性属于公测阶段，公测期产品完全免费，商业化后会根据元数据发现消耗资源收取资源费用。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
