-
运行任务 - 湖仓构建 LakeFormation
/v1/{project_id}/instances/{instance_id}/lf-jobs/{job_id}/start 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目编号。获取方法,请参见获取项目ID。 instance_id 是 String
-
元数据数量统计 - 湖仓构建 LakeFormation
POST /v1/{project_id}/instances/{instance_id}/metaobj/count 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目编号。获取方法,请参见获取项目ID。 instance_id 是 String
-
恢复实例 - 湖仓构建 LakeFormation
URI POST /v1/{project_id}/instances/{instance_id}/recover 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目编号。获取方法,请参见获取项目ID。 instance_id 是 String
-
停止任务 - 湖仓构建 LakeFormation
/v1/{project_id}/instances/{instance_id}/lf-jobs/{job_id}/stop 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目编号。获取方法,请参见获取项目ID。 instance_id 是 String
-
删除任务 - 湖仓构建 LakeFormation
/v1/{project_id}/instances/{instance_id}/lf-jobs/{job_id} 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目编号。获取方法,请参见获取项目ID。 instance_id 是 String
-
查看任务日志 - 湖仓构建 LakeFormation
/v1/{project_id}/instances/{instance_id}/lf-jobs/{job_id}/log 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目编号。获取方法,请参见获取项目ID。 instance_id 是 String
-
删除函数 - 湖仓构建 LakeFormation
name}/databases/{database_name}/functions/{function_name} 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目编号。获取方法,请参见获取项目ID。 instance_id 是 String
-
获取角色 - 湖仓构建 LakeFormation
/v1/{project_id}/instances/{instance_id}/roles/{role_name} 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目编号。获取方法,请参见获取项目ID。 instance_id 是 String
-
查询当前系统协议 - 湖仓构建 LakeFormation
/v1/{project_id}/agreement-rule 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目编号。获取方法,请参见获取项目ID。 请求参数 表2 请求Header参数 参数 是否必选 参数类型 描述 X-Auth-Token 是 String
-
对接后二次开发 - 湖仓构建 LakeFormation
huawei.cloud.dalf.lakecat.examples.ExampleAuthenticationManager # 可选参数,是否开启owner指定,开启后创建资源时将使用当前用户作为资源owner,默认为false spark.sql.catalog.catalog_name
-
配置LakeFormation实例 - 湖仓构建 LakeFormation
LakeFormation”进入LakeFormation控制台。 在左侧下拉框中选择待操作的LakeFormation实例。 查看实例“基本信息”中“是否为默认实例”的参数值。 “true”表示当前实例为默认实例。 “false”表示当前实例不为默认实例。 如果当前实例为默认实例,则无“设为默认实例”按钮。
-
查询规格列表 - 湖仓构建 LakeFormation
GET /v1/{project_id}/specs 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目编号。获取方法,请参见获取项目ID。 表2 Query参数 参数 是否必选 参数类型 描述 spec_code 否 String 规格编码。
-
修订记录 - 湖仓构建 LakeFormation
2023-08-23 第五次正式发布。文档内容更新为: 支持元数据、权限迁移,具体请见管理数据迁移。 2023-06-26 第四次正式发布。文档内容更新为: 增加变更实例规格,设置默认实例的操作,具体请见配置LakeFormation实例。 2023-04-17 第三次正式发布。文档内容更新为: 新
-
元数据发现 - 湖仓构建 LakeFormation
自动发现(包含Parquet、ORC、Json、Csv、Avro类型) Parquet ORC Json Csv(选择该类型,还需配置“分隔符”、“逃逸字符”、“引号字符”、“是否把第一行当做列名”等参数) Avro 说明: 如果数据存储位置下的文件后缀为同一类型,建议选择对应发现类型。 如果数据存储位置下的文件后缀为多种类型,建议选择“自动发现”。
-
对接后二次开发 - 湖仓构建 LakeFormation
lakecat.examples.ExampleAuthenticationManager</value> </property> <!--可选参数,是否开启owner指定,开启后创建资源时将使用当前用户作为资源owner,默认为false--> <property> <name>lakeformation
-
数据权限概述 - 湖仓构建 LakeFormation
函数(Function) OBS路径。 操作类型 主体对授权类型的访问权限,不同授权类型支持的操作类型各不相同,可参见表2。 赋予授权权限 是否赋予授权权限,赋予授权权限后,授权主体便可以将拥有将权限授权给其他授权主体。 表2 不同授权类型的操作权限 授权类型 操作类型 权限说明 Catalog
-
新增授权 - 湖仓构建 LakeFormation
单击选择授权的OBS文件系统中的路径。可以选择多个路径,但不能超过10个。 操作类型 选择授权的操作类型。不同的授权类型对应的操作类型不同,详见表2。 赋予授权权限 是否授予授权权限。 赋予授权权限后,授权主体便拥有将对象授权其他授权主体的权限。 如果需要取消对用户组或角色的授权,单击“操作”列中的“取消授权”,单击“确认”。
-
环境准备 - 湖仓构建 LakeFormation
校验压缩包:下载后在Windows环境下执行certutil -hashfile <压缩包> sha256,检查回显信息与对应sha256文件内容是否一致。 方式二:本地编译客户端 获取客户端代码。 获取地址为:https://gitee.com/HuaweiCloudDeveloper
-
环境准备 - 湖仓构建 LakeFormation
校验压缩包:下载后在Windows环境下执行certutil -hashfile <压缩包> sha256,检查回显信息与对应sha256文件内容是否一致。 方式二:本地编译客户端 获取客户端代码。 获取地址为:https://gitee.com/HuaweiCloudDeveloper
-
创建用户并授权使用LakeFormation - 湖仓构建 LakeFormation
在IAM控制台创建用户,并将其加入1.创建用户组并授权中创建的用户组。 用户登录并验证权限 以新创建的用户登录云服务控制台,切换至授权区域,验证权限是否生效。 例如: 在“服务列表”中选择LakeFormation服务,进入总览界面,单击右上角“购买实例”,实例创建界面正常展示,表示“la