检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Flink对接OBS 概述 Flink是一个分布式的数据处理引擎，用于处理有界和无界流式数据。Flink定义了文件系统抽象，OBS服务实现了Flink的文件系统抽象，使得OBS可以作为flink StateBackend和数据读写的载体。 注意事项 flink-obs-fs-hadoop目前仅支持OBS并行文件系统。
Hadoop对接OBS 概述 Hadoop系统提供了分布式存储、计算和资源调度引擎，用于大规模数据处理和分析。OBS服务实现了Hadoop的HDFS协议，在大数据场景中可以替代Hadoop系统中的HDFS服务，实现Spark、MapReduce、Hive等大数据生态与OBS服务的对接，为大数据计算提供“数据湖”存储。
为什么SDK源码中包含acs.amazonaws.com关键字？ OBS SDK 为了兼容访问aws s3服务，在源码中会包含acs.amazonaws.com关键字的固定格式，SDK仅作常量使用，不会向该格式有其他处理，也不会对其访问。SDK会自动兼容该场景，用户可不感知。比如Go
当月未用完的资源包用量是否会结转到下个月？ 当前没有这种结转机制。 资源包每月重置规则说明： 按订购周期重置，即购买后每月同一天24:00:00重置资源额度。例如：您在4月15日任意时刻购买6个月的公网流出流量包2TB并支付，您在4月15日到5月15日24:00:00间就会有2T
我在什么场景下需要使用生命周期管理？ 生命周期管理可适用于以下典型场景： 周期性上传的日志文件，可能只需要保留一个星期或一个月。到期后要删除它们。 某些文档在一段时间内经常访问，但是超过一定时间后便可能不再访问了。这些文档需要在一定时间后转化为低频访问存储，归档存储或者删除。 为
创建OBS客户端(Node.js SDK) 开发过程中，您有任何问题可以在github上提交issue，或者在华为云对象存储服务论坛中发帖求助。 OBS客户端（ObsClient）是访问OBS服务的Node.js客户端，它为调用者提供一系列与OBS服务进行交互的接口，用于管理、操
如何使对象可以被匿名用户访问？(Harmony SDK) 如果想对象可以被匿名用户，可通过以下三步完成。 参考设置对象元数据(Harmony SDK)章节，设置对象的访问权限为公共读。 参考如何获取对象URL章节，获取对象的URL提供给匿名用户。 匿名用户通过浏览器打开获取的URL，可访问到该对象。
为什么我运行了百万级别的任务后，感觉任务执行较慢？ 这是因为： OBS Browser+中任务数量达到了百万级别及以上，系统会处于海量查找的状态中，对您机器的性能要求比较高。 建议您： 为了提升您的体验，建议清理历史任务数据。 清理方法是在任务管理窗口，选中已完成任务然后删除，如图1所示。
Flume对接OBS 概述 Flume是一个分布式的、可靠的和高可用的服务，用于收集、聚合以及移动大量日志数据，具体请参见Apache Flume。OBS在大数据场景中可以替代Hadoop系统中的HDFS服务。 注意事项 多sink写同一文件 OBS和HDFS在一致性保证上是有差
配置CDN回源，并购买回源流量包，计费未走回源流量包 请检查购买的回源流量包和CDN回源源站桶是否在同一区域。 登录控制台。 在顶部导航栏单击“资源 > 我的资源”，查看购买的资源包所在区域。 登录CDN控制台，在“域名管理”中查看CDN加速域名所配置的源站OBS桶域名，根据桶域名可以判断出回源源站桶所在的区域。
签名不匹配（SignatureDoesNotMatch）如何处理 问题现象 调用OBS API报如下错误： 状态码：403 Forbidden 错误码：SignatureDoesNotMatch 错误信息：The request signature we calculated does
多版本控制简介(Node.js SDK) 开发过程中，您有任何问题可以在github上提交issue，或者在华为云对象存储服务论坛中发帖求助。 OBS支持保存一个对象的多个版本，您可以利用多版本控制，在一个桶中保留多个版本的对象。 多版本功能可以方便地检索和还原各个版本，在意外操作或应用程序故障时快速恢复数据。
配置生命周期管理策略 您可以为某个桶定义生命周期管理规则，来为该桶的对象定义各种生命周期规则。 操作步骤 登录OBS Browser+。 选中待配置的桶，单击“更多 > 生命周期规则”，如图1所示。 图1 生命周期规则 在“生命周期规则”窗口中单击“创建”，如图2所示。 图2 创建生命周期规则
给用户配置OBS系统权限或桶读写权限后仍然提示拒绝访问，请检查相应权限 原因 给用户配置了OBS系统权限 在IAM中给用户配置了OBS ReadOnlyAccess、OBS OperateAccess、OBS Buckets Viewer等系统权限后，实际上只允许执行一部分OBS操作，例如OBS
obsutil cp命令如何开启增量上传、下载和复制？ 在执行obsutil cp命令进行上传/下载时，可以通过增加“-u”参数开启增量功能。 该参数的含义为：上传/下载/复制每个对象时都会对比源路径和目标路径，仅在目标对象不存在，或者对象大小不一致，或者目标对象的最后修改时间早
为什么通过自定义域名访问桶，提示NoSuchBucket，而通过OBS访问域名可以访问？ 您在配置OBS桶的自定义域名后没有完成CNAME解析。 配置OBS桶的自定义域名分为两步： 配置自定义域名：实现OBS桶域名和自定义域名绑定。 配置解析CNAME：实现OBS桶域名和自定义域名的映射。
使用OBS SDK上传超过5GB的大文件失败 OBS服务端上传对象接口有规格限制，单次可上传的最大文件为5GB，如果需要上传超过5GB的大文件，需要通过OBS服务端提供的分段上传接口实现。具体步骤为： 调用OBS服务端初始化上传段任务接口，生成分段上传ID（Upload ID）。
下载一个对象名较长的对象到本地后，对象名称改变 问题： 使用OBS管理控制台下载一个对象名较长的对象到本地后，为什么对象名称发生了改变？ 原因： Windows操作系统下允许的文件名长度最大为255字符，包括文件名和扩展名在内。 当对象名称长度超过255字符时，将该对象下载到本地
Hortonworks HDP对接OBS 部署视图 安装版本 硬件：1master+3core（配置：8U32G，操作系统：CentOS 7.5） 软件：Ambari：2.7.1.0，HDP：3.0.1.0 部署视图 更新OBSA-HDFS工具 下载与hadoop版本配套的OBSA-HDFS工具：下载地址。
支持的大数据平台简介 华为云大数据存算分离方案中，OBS支持与多种大数据平台对接，包括华为云MapReduce服务（MRS）、Cloudera CDH和Hortonworks HDP，满足用户业务的灵活诉求。 华为云MapReduce服务（MRS） 华为云MapReduce服务（
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
