正在生成
详细信息:
检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
结构化、半结构化和非结构化数据。 数据处理工具,则分为两大类: 第一类工具,聚焦如何把数据“搬到”湖里。包括定义数据源、制定数据同步策略、移动数据、编制数据目录等。 第二类工具,关注如何对湖中的数据进行分析、挖掘、利用。数据湖需要具备完善的数据管理能力、多样化的数据分析能力、全面
ter”,为Spark作业提供运行所需的物理资源。 获取Spark作业代码 本示例使用的Spark作业代码来自maven库(下载地址:https://repo.maven.apache.org/maven2/org/apache/spark/spark-examples_2.10/1
作业运行中禁止修改密码或者更换用户。在作业运行过程中修改密码或者更换用户,密码不会立即生效且作业会运行失败。 - 端口 数据传输协议端口,https是443,http是80。 443 OBS桶类型 用户下拉选择即可,一般选择为“对象存储”。 对象存储 访问标识(AK) AK和SK分别为登录OBS服务器的访问标识与密钥。
建连接。 仅具备Manager_tenant或Manager_auditor权限,无法创建连接。 使用新建的用户登录Manager页面,并更新初始密码,否则会导致创建连接失败。 同步IAM用户。 登录MRS管理控制台。 选择“集群列表 > 现有集群”,选中一个运行中的集群并单击集群名称,进入集群信息页面。
操作解决方案 Y Y N Y N 查询解决方案 Y Y N Y Y 编辑解决方案 Y Y N N N 查询IAM代理 Y Y Y Y Y 更新IAM代理 Y N N N N 操作环境变量 Y Y N N N 查询环境变量 Y Y N Y Y 编辑环境变量 Y Y N N N 操作作业节点
os鉴权。 用户名 是 MRS集群的人机用户,通过代理连接时是必选项。如果使用新建的MRS用户进行连接,您需要先登录Manager页面,并更新初始密码。 如果要创建MRS安全集群的数据连接,不能使用admin用户。因为admin用户是默认的管理页面用户,这个用户无法作为安全集群的
20150907T101459Z Host 请求的服务器信息,从服务API的URL中获取。值为hostname[:port]。端口缺省时使用默认的端口,https的默认端口为443。 使用AK/SK认证时必选。 code.test.com or code.test.com:443 X-Project-Id
error_msg String 错误信息。 data Object 返回的数据信息。 请求示例 根据请求参数,修改目录。 DELETE https://{endpoint}/v2/{project_id}/design/directorys?ids=1231215227505364992
error_msg String 错误信息。 data Object 返回的数据信息。 请求示例 根据ID删除模型工作区。 DELETE https://{endpoint}/v2/{project_id}/design/workspaces?ids=1231989920109842432
表8 响应Body参数 参数 参数类型 描述 data Object 返回的数据信息。 请求示例 逆向数据库时,查看逆向任务。 GET https://{endpoint}/v2/{project_id}/design/dimension/database 响应示例 状态码: 200
error_msg String 错误信息。 data Object 返回的数据信息。 请求示例 根据审批人ID删除审批人。 DELETE https://{endpoint}/v2/{project_id}/design/approvals/users?approver_ids=38762
error_msg String 错误信息。 data Object 返回的数据信息。 请求示例 根据行业务指标的ID删除业务指标。 DELETE https://{endpoint}/v2/{project_id}/design/biz-metrics { "ids" : [ "1231252097002024960"
error_msg String 错误信息。 data Object 返回的数据信息。 请求示例 根据ID删除主题信息。 DELETE https://{endpoint}/v2/{project_id}/design/subjects 响应示例 状态码: 200 Success,返回data数据是删除个数。
6000,请求处理失败。 error_msg String 错误信息。 data Object 返回的数据信息。 请求示例 查看业务指标责任人集合。 GET https://{endpoint}/v2/{project_id}/design/biz-metrics/owners 响应示例 状态码: 200
返回的数据信息。 请求示例 将ID为1217123755210469378、表类型为TABLE_MODEL的表的质量规则清空。 DELETE https://{endpoint}/v2/{project_id}/design/1217123755210469378/qualities?t
error_msg String 错误信息。 data Object 返回的数据信息。 请求示例 获取数据连接类型为DWS的数据连接信息。 GET https://{endpoint}/v2/{project_id}/design/atlas/data-warehouses?dw_type=DWS
6000,请求处理失败。 error_msg String 错误信息。 data Object 返回的数据信息。 请求示例 查看指标维度信息。 GET https://{endpoint}/v2/{project_id}/design/biz-metrics/dimensions 响应示例 状态码:
error_msg String 错误信息。 data Object 返回的数据信息。 请求示例 根据审批单ID撤回审批单申请。 PUT https://{endpoint}/v2/{project_id}/design/approvals?ids=1230929439261609984
403 表8 响应Body参数 参数 参数类型 描述 data Object 返回的数据信息。 请求示例 查看逆向事实表任务。 GET https://{endpoint}/v2/{project_id}/design/fact-logic-tables/database 响应示例
error_msg String 错误信息。 data Object 返回的数据信息。 请求示例 删除当前工作空间下的数据标准模板。 DELETE https://{endpoint}/v2/{project_id}/design/standards/templates { "ids" :