检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
ction任务单独拆成Spark作业并交给MRS执行,那么如何进行配置? 解决方案 修改Migration实时集成作业配置。 Migration任务中必须关闭异步compaction动作,同时将clean和archive关闭。具体来说,可以在“Hudi表属性全局配置”或单表的“表属性编辑”中配置下表所示参数。
产出信息(邀测) 功能介绍 查询表相关的作业算子运行实例信息,该接口功能处于邀测阶段,后续将随功能公测将逐步开放。 调用方法 请参见如何调用API。 URI GET /v1/{project_id}/datamap/node/{task_id}/instances 表1 路径参数
Python安装完成后,在命令行中使用pip安装“requests”库。 pip install requests 如果pip安装requests遇到证书错误,请下载并使用Python执行此文件,升级pip,然后再执行以上命令安装。 获取并安装IntelliJ IDEA,如果未安装,请至IntelliJ
查找主题列表 功能介绍 通过名称(支持模糊查询)、创建者、责任人、状态、修改时间分页查找主题。 调用方法 请参见如何调用API。 URI GET /v2/{project_id}/design/subjects 表1 路径参数 参数 是否必选 参数类型 描述 project_id
6000,请求处理失败。 error_msg String 错误信息。 data Object 返回的数据信息。 请求示例 根据请求参数,将表的属性与数据标准关联。 PUT https://{endpoint}/v2/{project_id}/design/standards/attribute {
Studio实例下仅能创建一个。因此,将IAM认证方式的API授权给IAM类型的应用,实际上是将API授权给了当前账号。因此在授权后,从IAM服务获取当前账号及其归属用户的Token,在调用API时才能通过安全认证,成功调用API。 通过白名单授权。IAM认证方式API支持添加华为账号白名单,将API授权给
击其所在行的“编辑”。此时显示“空间信息”页面。在“空间信息”页面,您可以参考表1修改工作空间的相关参数,最后单击“确定”保存修改的配置。 值得注意的是,与新建工作空间相比,编辑工作空间不支持修改标签(详见添加/编辑标签),支持添加工作空间成员(详见添加工作空间成员和角色)和配置工作空间配额(详见设置工作空间配额)。
消息通知类型:主要用于配置权限到期提醒时,通过选择外部接口,将权限到期提醒消息发送给外部接口所对接的第三方平台通知接口,供第三方平台分发消息。详见配置权限到期提醒。 *终端 终端地址,请输入第三方平台提供的接口公网地址。例如:https://example.com/encryption *请求方法
6000,请求处理失败。 error_msg String 错误信息。 data Object 返回的数据信息。 请求示例 根据入参,修改汇总表信息。 PUT https://{endpoint}/v2/{project_id}/design/aggregation-logic-tables
查询业务指标信息 功能介绍 通过名称、创建者、修改时间分页查找业务指标信息。 调用方法 请参见如何调用API。 URI GET /v2/{project_id}/design/biz-metrics 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String
业名称,单击“添加通知配置”,此通知配置为作业的新增配置,详细指导请参见配置通知。 如果要对作业已有通知配置进行修改,请进入通知管理页面,按照配置通知指导进行配置修改。单个作业跳转到通知管理页面后,会对该作业的配置信息进行过滤,查看该作业的配置信息。 父主题: (可选)管理作业
击其所在行的“编辑”。此时显示“空间信息”页面。在“空间信息”页面,您可以参考表1修改工作空间的相关参数,最后单击“确定”保存修改的配置。 值得注意的是,与新建工作空间相比,编辑工作空间不支持修改标签(详见添加/编辑标签),支持添加工作空间成员(详见添加工作空间成员和角色)和配置工作空间配额(详见设置工作空间配额)。
通过DIS Stream节点查询DIS通道的状态,如果DIS通道运行正常,继续执行后续的节点;如果DIS通道运行异常,DIS Stream将报错并退出,此时如果需要继续执行后续的节点,请配置“失败策略”为“继续执行下一节点”,请参见表2。 参数 用户可参考表1和表2配置DIS Stream节点的参数。
获取数据标准集合 功能介绍 根据查询条件分页获取数据标准集合,按修改时间降序排序。 调用方法 请参见如何调用API。 URI GET /v2/{project_id}/design/standards 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String
用、恢复的待审核或待执行状态,则不支持编辑。 在基本配置处,修改“服务目录可见性”参数的取值,可以选择为“当前工作空间可见”、“当前项目可见”或“当前租户可见”。然后保存修改。 修改完成后,重新恢复或发布API,即可修改此API在服务目录中的可见范围。 父主题: 管理API
资源的描述信息。 编辑资源 资源新建完成后,用户可以根据需求修改资源的参数。 在数据开发主界面的左侧导航栏,选择“配置管理 > 资源管理”。 在资源的“操作”列,单击“编辑”,弹出“编辑资源”页面,参考表2修改资源的参数。 单击“确定”,保存修改。 删除资源 当用户不需要使用某个资源时,可以删除该资源。
查找原子指标 功能介绍 通过中英文名称、创建者、审核人、状态、修改时间分页查找原子指标信息看,中英文名称支持模糊查询。 调用方法 请参见如何调用API。 URI GET /v2/{project_id}/design/atomic-indexs 表1 路径参数 参数 是否必选 参数类型
"role_id" : "r00003" } ], "type" : 0 } 响应示例 状态码: 200 Success,修改工作空间用户成功。 { "message" : null, "is_success" : true } 状态码: 400 { "error_code"
URL导出数据,不支持导入。 表1 HTTP/HTTPS作为源端时的作业参数 参数名 说明 取值样例 文件URL 通过使用GET方法,从HTTP/HTTPS协议的URL中获取数据。 用于读取一个公网HTTP/HTTPS URL的文件,包括第三方对象存储的公共读取场景和网盘场景。 https://bucket
CloudTable连接参数说明 连接CloudTable时,相关参数如表1所示。 作业运行中禁止修改密码或者更换用户。在作业运行过程中修改密码或者更换用户,密码不会立即生效且作业会运行失败。 表1 CloudTable连接参数 参数名 说明 取值样例 名称 连接的名称,根据连接