-
管理函数 - 湖仓构建 LakeFormation
管理函数 用户在数据目录(Catalog)中可对元数据进行管理,按照业务规划创建对应函数。 前提条件 已创建LakeFormation实例,且实例处于正常运行状态。 已创建待添加函数的数据库及其所属Catalog。 如果配置“函数位置”参数,需已参考创建元数据存储路径提前创建了用于存储函数的OBS并行文件系统。
-
管理Catalog - 湖仓构建 LakeFormation
管理Catalog 数据目录(Catalog)是元数据管理对象,它可以包含多个数据库。 用户可在LakeFormation中创建并管理多个Catalog,用于不同外部集群的元数据隔离。 前提条件 已创建LakeFormation实例,且实例处于正常运行状态。 Catalog数据存
-
管理数据表 - 湖仓构建 LakeFormation
据信息。 其中格式与序列化信息包含存储格式、输入格式、输出格式等。 其中字段信息包含表字段名称、类型、描述,以及分区键的字段名称、类型、描述。 其中表属性信息包含Table的各个属性的属性名、属性值。 单击“编辑”按钮,可对数据表相关字段进行修改。 父主题: 管理元数据
-
创建用户并授权使用LakeFormation - 湖仓构建 LakeFormation
IAM项目只读授权指导:当租户管理员需要给某个子用户分配LakeFormation服务在某个IAM项目下的只读权限。可以给该用户创建一个用户组,同时在用户组将LakeFormation ReadOnlyAccess系统策略授权给指定IAM项目即可。 企业项目授权指导:当租户管理员需要给某个子用
-
管理数据库 - 湖仓构建 LakeFormation
管理数据库 LakeFormation的一个Catalog下可以创建多个数据库,通过集中式的元数据管理,可以有效提升数据资产价值。 前提条件 已创建LakeFormation实例,且实例处于正常运行状态。 已创建待添加数据库的Catalog。 已参考创建元数据存储路径提前创建了用于存储数据库的OBS并行文件系统。
-
分区管理 - 湖仓构建 LakeFormation
分区管理 批量修改分区信息 列举分区信息 批量添加分区信息 批量删除分区信息 批量获取分区信息 列举分区值列表 列举全量分区值列表 父主题: LakeCat
-
规格管理 - 湖仓构建 LakeFormation
规格管理 查询规格列表 父主题: Console
-
任务管理 - 湖仓构建 LakeFormation
任务管理 创建任务 根据条件分页列举任务信息 删除任务 获取任务详情 修改任务信息 运行任务 停止任务 查看任务日志 父主题: Console
-
函数管理 - 湖仓构建 LakeFormation
函数管理 列举Catalog下所有的函数 修改函数属性 创建函数 列举库下所有函数名称 查询函数 删除函数 列举函数 父主题: LakeCat
-
接入管理 - 湖仓构建 LakeFormation
接入管理 获取服务接入信息 申请接入服务 获取服务接入客户端信息列表 创建服务接入客户端 获取服务接入客户端详情 删除服务接入客户端 更新服务接入客户端 父主题: Console
-
凭证管理 - 湖仓构建 LakeFormation
凭证管理 获取临时密钥和securityToken 父主题: LakeCat
-
权限管理 - 湖仓构建 LakeFormation
权限管理 创建用户并授权使用LakeFormation 创建LakeFormation自定义IAM策略 父主题: 准备工作
-
什么是区域和可用区 - 湖仓构建 LakeFormation
区域、可用区创建资源。 区域(Region)指物理的数据中心。每个区域完全独立,这样可以实现最大程度的容错能力和稳定性。资源创建成功后不能更换区域。 可用区(AZ,Availability Zone)是同一区域内,电力和网络互相隔离的物理区域,一个可用区不受其他可用区故障的影响。
-
区域与可用区 - 湖仓构建 LakeFormation
区域、可用区创建资源。 区域(Region)指物理的数据中心。每个区域完全独立,这样可以实现一定程度的容错能力和稳定性。资源创建成功后不能更换区域。 可用区(AZ,Availability Zone)是同一区域内,电力和网络互相隔离的物理区域,一个可用区不受其他可用区故障的影响。
-
目录管理 - 湖仓构建 LakeFormation
目录管理 列举Catalog信息 获取Catalog信息 创建Catalog 修改Catalog信息 删除Catalog对象 父主题: LakeCat
-
角色管理 - 湖仓构建 LakeFormation
角色管理 创建Role 根据条件分页列举角色 删除角色 获取角色 修改角色信息 列举所有角色名 查询角色下的用户/用户组 将一个或者多个用户/用户组加入角色 将一个或者多个用户/用户组从角色移除 更新角色中的principals 父主题: LakeCat
-
授权管理 - 湖仓构建 LakeFormation
授权管理 批量授权 获取同步权限策略 取消批量授权 查询策略 批量鉴权 分页获取同步权限策略 父主题: LakeCat
-
环境准备 - 湖仓构建 LakeFormation
将LakeFormation的客户端代码中的patch应用到Hive源码。 根据需要切换Hive源码分支,例如Hive内核版本号为2.3.9,则执行如下命令: git checkout rel/release-2.3.9 执行以下命令,将patch应用到切换分支后的Hive源码工程。 mvn patch:apply
-
环境准备 - 湖仓构建 LakeFormation
将LakeFormation的客户端代码中的patch应用到Hive源码。 根据需要切换Hive源码分支,例如Hive内核版本号为2.3.9,则执行如下命令: git checkout rel/release-2.3.9 执行以下命令,将patch应用到切换分支后的Hive源码工程。 mvn patch:apply
-
管理数据权限 - 湖仓构建 LakeFormation
管理数据权限 数据权限概述 新增授权 取消授权 查询授权 角色授权