检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
配置Spark对接LakeFormation 使用pyspark时，需要将以下配置中“spark.hadoop”开头的参数去掉“spark.hadoop”后配置到hive-site.xml配置文件中。 对接通用配置 在“spark/conf/spark-defaults.conf”中添加以下配置：
incipals [ { "principal_name" : "user1", "principal_source" : "IAM", "principal_type" : "USER" } ] 响应示例 状态码： 200 OK [ { "principal_name"
objects 配置项。 page_info PagedInfo object 分页信息。 表5 LakeCatConfiguration 参数 参数类型 描述 key String 配置项的key。 value String 配置项的值。 description String 配置项描述。
在Git中执行以下命令将分支切换为“master_dev”： git checkout master_dev 配置maven源，详细操作请参考获取SDK并配置maven。 获取以下jar包及对应的pom文件，并将文件放入maven本地仓库。 例如本地仓库地址为“D:\maven\repository”，
在“服务列表”中，选择“网络 > 云解析服务DNS”进入云解析控制台。 在左侧选择“内网域名”，进入内网域名界面。 在搜索框中搜索“lakeformation.lakecat.com”，查找“已关联的VPC”列为创建的客户端对应的虚拟私有云的域名所在的行，单击对应“操作”列的“管理解析”。 单击“添加记录集”，填写以下参数后，单击“确定”。
配置云服务授权 首次使用LakeFormation服务需要进行服务授权，授权相关云资源的权限。 云服务授权操作 使用注册华为云账号创建的用户登录管理控制台。 在服务列表中选择“大数据 > 湖仓构建 LakeFormation”，进入“服务授权”页面。 IAM ReadOnlyAc
配置LakeFormation实例 LakeFormation实例创建完成后，可以在实例“总览”页面对LakeFormation实例进行变更实例规格、设置默认实例等操作。 变更实例规格：对当前实例的QPS规格进行变更。仅独享型实例支持该操作。 设置默认实例：设置当前实例为默认实例
配置Hive对接LakeFormation 修改Hive服务端安装环境的“conf”目录的hive-site.xml文件，添加如下内容（部分参数值根据提示进行替换）： <property> <name>hive.metastore.session.client.class</name>
配置管理 获取所有用户可见的租户面配置 父主题： LakeCat
subnet_id String 子网ID。 ip String 接入IP。 owner String 拥有者。 domain String 接入域名，通过IP接入访问Lakeformation API时，需在请求头中添加HOST参数并传入该域名。 请求示例 POST https://
并在Git中执行以下命令将分支切换为“master_dev”： git checkout master_dev 配置maven源，详细操作请参考获取SDK并配置maven。 获取以下jar包以及对应的pom文件，并将文件放入maven本地仓库。 例如本地仓库地址为“D:\maven\repository”
准备工作： 已在IAM服务中创建用于授权的IAM业务用户、用户组，用户已关联至用户组。 已在OBS服务中创建一个并行文件系统，并在文件系统中创建用于映射数据表的文件夹。 已创建对接LakeFormation所需的相关委托。例如，如果执行MRS对接LakeFormation，则参考MRS准备工作创建相关委托等。
subnet_id String 子网ID。 ip String 接入IP。 owner String 拥有者。 domain String 接入域名，通过IP接入访问Lakeformation API时，需在请求头中添加HOST参数并传入该域名。 请求示例 GET https://{
subnet_id String 子网ID。 ip String 接入IP。 owner String 拥有者。 domain String 接入域名，通过IP接入访问Lakeformation API时，需在请求头中添加HOST参数并传入该域名。 请求示例 GET https://{
} 调用获取服务接入客户端详情接口，查询接入客户端状态，等待状态变为RUNNING，表示接入客户端创建完成，同时可以在详情中查看接入IP、域名等详细信息。 请求示例： GET https://{endpoint}/v1/{project_id}/instances/{insta
框中分别选择待创建函数的Catalog、数据库的名称。可以查看当前数据库中包含的函数。 单击“创建函数”，配置相关参数。 在“基本信息”区域配置以下信息。 表1 基本信息配置参数 参数 参数说明 函数名称 填写待创建的元数据函数名称。 只能包含字母、数字、下划线，长度为1~256个字符。
实例进行的。 LakeFormation提供实例的创建、配置、删除等基本功能，帮助您便捷地进行实例管理，加速实现数据湖承载的业务的规划和部署。 已发布区域：以控制台实际上线区域为准。 创建LakeFormation实例 配置LakeFormation实例 元数据管理 数据目录（Catalog）
LakeFormation提供了默认的认证信息获取类，通过从配置文件中获取AKSK生成认证信息。 除LakeFormation提供的默认认证信息获取类外，可选择自行实现默认认证信息获取类。 代码开发。 实现工程参考如下，在Maven工程pom文件中添加lakeformation-lakecat-client依赖：
//返回IAM认证信息 } } 集成配置。 代码通过Maven打包后将jar包放置在“spark/jars”目录下。 根据对接方式不同，补充以下配置： 使用SparkCatalogPlugin方式对接时，在spark-default.conf配置文件中补充以下配置： # 认证信息获取类，根据实现类路径填写，此处配置值仅作为参考
拉框中分别选择待创建表的Catalog、数据库的名称。可以查看当前数据库中包含的数据表。 单击“创建表”，配置相关参数。 在“基本信息”区域配置以下信息。 表1 基本信息配置参数 参数 参数说明 表名称 填写待创建的元数据表名称。 只能包含中文、字母、数字、下划线，长度为1~256个字符。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
