-
约束与限制 - 湖仓构建 LakeFormation
用户自定义创建的Catalog对象及其子元数据对象,暂不支持授权和细粒度权限控制。 LakeFormation数据权限单次授权,授权主体不能超过20个,元数据对象不能超过10个。 LakeFormation中,总分区数量不超过1,000,000,000。 LakeFormation不支持跨Region的元数据和权限统一管理。
-
参考样例 - 湖仓构建 LakeFormation
参考样例 在准备好开发和运行环境后,用户可根据需求开发样例,例如参考代码如下: package com.huawei.cloud.dalf.lakecat.examples; import com.huaweicloud.sdk.core.auth.BasicCredentials;
-
资产识别与管理 - 湖仓构建 LakeFormation
资产识别与管理 资产识别 资产信息:元数据信息、数据权限策略信息。 账号信息:不涉及,用户在LakeFormation不感知具体账号信息。 API映射表:请参见API参考。 LakeFormation云服务需要访问的租户资源包括:租户的用户组和用户信息的读取,对象存储文件目录的创
-
什么是区域和可用区 - 湖仓构建 LakeFormation
什么是区域和可用区 通常用区域和可用区来描述数据中心的位置,您可以在特定的区域、可用区创建资源。 区域(Region)指物理的数据中心。每个区域完全独立,这样可以实现最大程度的容错能力和稳定性。资源创建成功后不能更换区域。 可用区(AZ,Availability Zone)是同一
-
区域与可用区 - 湖仓构建 LakeFormation
区域与可用区 通常用区域和可用区来描述数据中心的位置,您可以在特定的区域、可用区创建资源。 区域(Region)指物理的数据中心。每个区域完全独立,这样可以实现一定程度的容错能力和稳定性。资源创建成功后不能更换区域。 可用区(AZ,Availability Zone)是同一区域内
-
MRS对接LakeFormation实例 - 湖仓构建 LakeFormation
MRS对接LakeFormation实例 MRS对接前准备 MRS对接LakeFormation实例前准备请参考准备工作章节创建委托、配置LakeFormation数据连接等操作。 MRS对接LakeFormation实例 当前仅MRS 3.3.0-LTS版本集群支持对接LakeFormation。 MR
-
身份认证与访问控制 - 湖仓构建 LakeFormation
资产的访问控制 元数据信息的访问控制 LakeFormation实例针对Console或其他云服务的元数据访问请求,在经过身份认证后,首先进行IAM鉴权,检查用户是否具备请求中的元数据操作权限,接着再进行细粒度的鉴权,检查用户是否具备针对请求中的具体元数据的请求操作权限。鉴权失败则拒绝请求。
-
基本概念 - 湖仓构建 LakeFormation
基本概念 元数据 数据权限 区域与可用区
-
应用场景 - 湖仓构建 LakeFormation
应用场景 数据湖建设和持续运营 多服务/多集群共享元数据
-
湖仓构建 LakeFormation - 湖仓构建 LakeFormation
02:31 创建LakeFormation实例 湖仓构建 LakeFormation 创建LakeFormation元数据并授权 06:36 创建LakeFormation元数据并授权
-
根据条件分页列举任务信息 - 湖仓构建 LakeFormation
任务名通配符,用于任务名的匹配。 type 是 String METADATA_MIGRATION:元数据迁移、 PERMISSION_MIGRATION:数据权限迁移、 METADATA_DISCOVERY:元数据发现。 枚举值: METADATA_MIGRATION PERMISSION_MIGRATION
-
修订记录 - 湖仓构建 LakeFormation
修订记录 发布日期 修订记录 2023-08-23 第五次正式发布。文档内容更新为: 支持元数据、权限迁移,具体请见管理数据迁移。 2023-06-26 第四次正式发布。文档内容更新为: 增加变更实例规格,设置默认实例的操作,具体请见配置LakeFormation实例。 2023-04-17
-
如何获取AK/SK - 湖仓构建 LakeFormation
ID/Secret Access Key)即访问密钥,包含访问密钥ID(AK)和秘密访问密钥(SK)两部分,系统通过AK识别用户的身份,通过SK对请求数据进行签名验证,用于确保请求的机密性、完整性和请求者身份的正确性。 登录华为云管理控制台。 将鼠标移动到右上角用户名,在下拉列表中单击“我的凭证”。
-
安全 - 湖仓构建 LakeFormation
安全 资产识别与管理 身份认证与访问控制 数据保护技术 审计 更新管理
-
管理接入客户端 - 湖仓构建 LakeFormation
在客户端详情中获取接入IP等信息,用于多种服务接入LakeFormation实例。 操作步骤 登录管理控制台。 在左上角单击“”,选择“大数据 > 湖仓构建 LakeFormation”进入LakeFormation控制台。 在左侧下拉框中选择待操作的LakeFormation实例,在左侧导航栏选择“接入管理”。
-
创建LakeFormation实例及客户端连接 - 湖仓构建 LakeFormation
系统中创建用于映射数据表的文件夹。 已创建对接LakeFormation所需的相关委托。例如,如果执行MRS对接LakeFormation,则参考MRS准备工作创建相关委托等。 创建LakeFormation实例 登录管理控制台。 在左上角单击“”,选择“大数据 > 湖仓构建 L
-
如何获取LakeFormation实例ID - 湖仓构建 LakeFormation
如何获取LakeFormation实例ID 登录LakeFormation管理控制台。 在左上角单击“”,选择“大数据 > 湖仓构建 LakeFormation”进入LakeFormation控制台。 在左侧下拉框中选择待操作的LakeFormation实例。 在实例的“基本信息
-
配置LakeFormation实例 - 湖仓构建 LakeFormation
ormation实例时,没有指定具体的实例ID,该操作将会修改服务对接的实例。 变更实例规格 登录管理控制台。 在左上角单击“”,选择“大数据 > 湖仓构建 LakeFormation”进入LakeFormation控制台。 在左侧下拉框中选择待操作的LakeFormation实例。
-
最新动态 - 湖仓构建 LakeFormation
2022年11月 序号 功能名称 功能描述 阶段 相关文档 1 LakeFormation公测上线 支持基于IAM用户组统一授权管理。 元数据统一,支持与MRS集群Hive和Spark对接。 商用 LakeFormation使用流程简介
-
删除LakeFormation实例 - 湖仓构建 LakeFormation
删除LakeFormation实例 登录管理控制台。 在左上角单击“”,选择“大数据 > 湖仓构建 LakeFormation”进入LakeFormation控制台。 在左侧下拉框中选择待操作的LakeFormation实例。 单击页面右上角“删除当前实例”。 在弹出的确认窗口中