检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
DataX是一个数据同步框架,实现了包括MySQL、SQL Server、Oracle、PostgreSQL、HDFS、Hive、HBase、OTS、ODPS等各种异构数据源之间高效的数据同步功能。OBS在大数据场景中可以替代Hadoop系统中的HDFS服务,本文介绍DataX如何对接OBS。 对接步骤
该请求的响应消息使用公共消息头,具体请参考表1。 响应消息元素 名称 参数类型 说明 count Int 列表条数。 graphs Array GraphItem 工作流模板列表信息。 next_start Int 下一次查询的起始位置。 is_truncated Boolean 表明是否本次返回的Li
权限备注名。 role_remark_type 是 String 权限的备注模式: AX表示在domain层显示。 XA表示在project层显示。 AA表示在domain和project层均显示。 XX表示在domain和project层均不显示。 自定义策略的显示模式只能为AX或者X
该请求的响应消息使用公共消息头,具体请参考表1。 响应消息元素 表2 响应元素 名称 参数类型 说明 count Int 满足条件的运行实例个数。 executions Array Execution 实例信息列表。 is_truncated Boolean 表明是否本次返回的结果列表被截断。 true:表示本次没有返回全部结果。
获取桶列表 操作场景 如果用户想要查看自己创建的所有桶信息,可以使用获取桶列表接口查看。 下面介绍如何调用获取桶列表API,API的调用方法请参见如何调用API。 前提条件 已获取AK和SK,获取方法参见获取访问密钥(AK/SK)。 您需要明确需要列举的桶所在的区域信息,并根据区
查询华为云算子模板列表 功能介绍 本接口用于查询已有预置Action模板列表。 请求消息样式 GET /v2/actiontemplates/{template_name_prefix}?x-workflow-category={category}&x-workflow-prefix
extensionHeaders) 请求参数说明 表1 请求参数列表 参数名称 参数类型 是否必选 描述 isQueryLocation bool 可选 参数解释: 是否同时查询桶的区域位置。 取值范围: True:同时查询桶的区域位置 False:不查询桶的区域位置 默认取值: False extensionHeaders
format_exc()) # 关闭workflowClient workflowClient.close() 相关链接 关于查询工作流列表的API说明,请参见查询工作流列表。 查询工作流列表过程中返回的错误码含义、问题原因及处理措施可参考OBS错误码。 父主题: 工作流管理
# 关闭workflowClient workflowClient.close() 相关链接 关于查询工作流实例列表的API说明,请参见查询工作流实例列表。 查询工作流实例列表过程中返回的错误码含义、问题原因及处理措施可参考OBS错误码。 父主题: 工作流实例管理
审计 云审计服务(Cloud Trace Service,CTS),是华为云安全解决方案中专业的日志审计服务,提供对各种云资源操作记录的收集、存储和查询功能,可用于支撑安全分析、合规审计、资源跟踪和问题定位等常见应用场景。 用户开通云审计服务并创建和配置追踪器后,CTS可记录OBS的管理事件和数据事件用于审计。
id 响应消息头 该请求的响应消息使用公共消息头,具体请参考表1。 响应消息元素 表2 响应元素 名称 参数类型 说明 execution_info json 实例信息。 错误响应消息 无特殊错误,所有错误已经包含在表2中。 请求示例 GET /v2/workflowexecut
查询工作流详情 功能介绍 本接口用于根据工作流名称查询工作流详细信息。 请求消息样式 GET /v2/workflows/{graph_name} HTTP/1.1 Host: obs.cn-north-4.myhuaweicloud.com Authorization: authorization
查询对象属性 功能说明 查询对象的基本属性。 命令结构 Windows操作系统 obsutil stat obs://bucket/key [-acl][-bf=xxx] [-config=xxx] [-e=xxx] [-i=xxx] [-k=xxx] [-t=xxx] macOS/Linux操作系统
开启“清理服务器存储”后,上传至媒体库的图片和其他附件在上传到OBS后会在本地删除,因此在停用插件后,无法利用本地数据做恢复和替换。 单击“保存配置”,完成配置。 测试配置是否成功。 新建文章进行测试,在文章中插入图片,插入成功后发布文章。 在图片右键复制图片地址,可以查看当前图片URL
BucketType 桶的类型,OBJECT代表对象桶;POSIX代表并行文件系统。 AvailableZone 桶的可用区。 ObjectNumber 桶内对象个数。 Size 桶的存储用量,单位:字节。 Quota 桶的配额值,0代表配额没有上限。 Acl 桶的访问策略。 父主题:
如何查看桶内的文件夹大小? 可以使用obsutil列举对象命令,指定前缀为需要查看的文件夹进行列举。 以Linux操作系统为例,运行./obsutil ls obs://bucket-test/test/ -du -limit=0命令,查询桶bucket-test下test文件夹的大小。
body 响应消息头 该请求的响应消息使用公共消息头,具体请参考表1。 响应消息元素 表1 响应元素 名称 参数类型 说明 rules Array 策略规则数组,请参考Rule结构体。 错误响应消息 无特殊错误,所有错误已经包含在表2中。 请求示例 GET /?obsworkflowtriggerpolicy
响应消息头 该请求的响应消息使用公共消息头,具体请参考表1。 响应消息元素 表2 响应消息元素 名称 参数类型 说明 provided_actions Array of ProvidedAction 可选的Action列表。 表3 ProvidedAction参数说明 名称 是否必选
查看桶多版本状态 开发过程中,您有任何问题可以在github上提交issue,或者在华为云对象存储服务论坛中发帖求助。接口参考文档详细介绍了每个接口的参数和使用方法。 您可以通过ObsClient.getBucketVersioning查看桶的多版本状态。以下代码展示了如何查看桶的多版本状态:
终端节点(Endpoint)不会限制查询结果,无论哪一个区域的Endpoint,查询结果都是所有区域的桶列表。 创桶期间不要并发列举桶 请求消息参数 该请求消息中不带请求参数。 请求消息头 该操作消息头与普通请求一样,请参见表3,但可以带附加消息头,附加请求消息头如下所示。 表1 附加请求消息头 消息头名称