检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
LakeFormation元数据映射的数据文件和目录存储在OBS并行文件系统中。在创建LakeFormation元数据之前,需要提前创建数据存储使用的OBS并行文件系统。 如果已存在可用的OBS并行文件系统,可跳过该章节操作。 操作步骤 创建OBS并行文件系统,详情请参考创建并行文件系
多服务/多集群共享元数据 场景描述 多服务/多集群均使用统一的元数据,最大化实现数据的共享,避免不必要的重复数据,更大程度释放业务数据价值。 本服务的优势 兼容Hive元数据模型:提供兼容Hive元数据模型的SDK客户端,使计算引擎对接LakeFormation更轻松和高效。 兼
(可选)单击“表属性”区域中的“添加表属性”。按照需求添加元数据的表属性,单击“确定”。支持添加多条。 表属性:使您能够使用自己的元数据键/值对来标记表定义。 单击“提交”。 创建完成后,即可在数据表页面查看表名称/ID、所属Catalog、所属数据库、类型、存储位置等信息。 单击“操作”列的“编辑”可以修改数据表配置信息。
理,因此客户需要便捷高效的建设和管理方式。 多计算引擎共享元数据:多计算引擎共享元数据,是指客户的多种计算引擎(Hive、Spark等)均使用统一的元数据,最大化实现数据的共享,避免不必要的重复数据,更大程度释放业务数据价值。
ces/{instance_id}/access-clients/{client_id} 响应示例 无 状态码 状态码 描述 200 删除成功 错误码 请参见错误码。 父主题: 接入管理
metadata-event/subscribers/{subscriber_name} 响应示例 无 状态码 状态码 描述 200 删除成功 错误码 请参见错误码。 父主题: 元数据事件管理
表1 开发流程 阶段 说明 参考文档 环境准备 准备LakeFormation开发环境 环境准备 根据场景编写程序 使用LakeFormation SDK编写程序 使用LakeFormation Java SDK开发程序 父主题: 服务介绍
t_id} { "name" : "lakeformation_client" } 响应示例 无 状态码 状态码 描述 200 更新成功 错误码 请参见错误码。 父主题: 接入管理
"common.00000500", "error_msg" : "internal error" } 状态码 状态码 描述 204 删除成功 400 Bad Request 401 Unauthorized 403 Forbidden 404 Not Found 408 Request
"common.00000500", "error_msg" : "internal error" } 状态码 状态码 描述 204 删除成功 400 Bad Request 401 Unauthorized 403 Forbidden 404 Not Found 408 Request
"common.00000500", "error_msg" : "internal error" } 状态码 状态码 描述 201 创建委托成功 400 Bad Request 401 Unauthorized 403 Forbidden 404 Not Found 408 Request
LakeFormation公测上线 支持基于IAM用户组统一授权管理。 元数据统一,支持与MRS集群Hive和Spark对接。 商用 LakeFormation使用流程简介
"common.00000500", "error_msg" : "internal error" } 状态码 状态码 描述 200 删除委托成功 400 Bad Request 401 Unauthorized 403 Forbidden 404 Not Found 408 Request
"common.00000500", "error_msg" : "internal error" } 状态码 状态码 描述 200 授权成功 400 Bad Request 401 Unauthorized 403 Forbidden 404 Not Found 408 Request
max_stride_num Integer 最大步数。 usage_measure_id Integer 使用量单位标识。 usage_factor String 使用量因子。 usage_value Integer 使用量,包含免费额度和单位额度,例如api调用次数,单位是次,前100万次调用免费,计
"common.00000500", "error_msg" : "internal error" } 状态码 状态码 描述 200 删除委托成功 400 Bad Request 401 Unauthorized 403 Forbidden 404 Not Found 408 Request
"common.00000500", "error_msg" : "internal error" } 状态码 状态码 描述 201 创建委托成功 400 Bad Request 401 Unauthorized 403 Forbidden 404 Not Found 408 Request
"common.00000500", "error_msg" : "internal error" } 状态码 状态码 描述 200 注册租户协议成功 400 Bad Request 401 Unauthorized 403 Forbidden 404 Not Found 408 Request
"common.00000500", "error_msg" : "internal error" } 状态码 状态码 描述 200 恢复成功 400 Bad Request 401 Unauthorized 403 Forbidden 404 Not Found 408 Request
同时需要准备运行调测的环境,用于验证应用程序运行正常。 表1 准备项 准备项 说明 准备LakeFormation实例 在LakeFormation控制台创建实例,或者使用已有LakeFormation实例。 创建客户端 在LakeFormation控制台接入管理界面创建客户端。 修改DNS信息 在云解析服务