检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
在文件中添加OBS日志级别配置： log4j.logger.org.apache.hadoop.fs.obs=WARN log4j.logger.com.obs=WARN 图4 添加OBS日志级别 使用Spark Shell读取OBS文件 使用安装客户端用户登录客户端安装节点。 配置环境变量。
Druid对接OBS 概述 Druid专为需要快速数据查询与摄入的工作流程而设计，在即时数据可见性、即席查询、运营分析以及高并发等方面表现非常出色。 通过HDFS接口对接OBS，使用OBS提供的OBSA-HDFS工具，无需重新编译druid，将OBS配置为deep storage。
碎片管理功能可以清除由于对象上传失败而产生的数据。 权限控制 OBS Browser支持通过桶策略、对象策略、桶ACL和对象ACL进行权限控制。 服务端加密 用户可根据需要对对象进行服务端加密，使对象更安全的存储在OBS中。 跨域资源共享 跨域资源共享（CORS）是由W3C标准化组
初始化OBS客户端(Node.js SDK) 开发过程中，您有任何问题可以在github上提交issue，或者在华为云对象存储服务论坛中发帖求助。 向OBS发送任一HTTP/HTTPS请求之前，必须先创建一个ObsClient实例： // 引入obs库 // 使用npm安装 const
Spark对接OBS 概述 Apache Spark是专为大规模数据处理而设计的快速通用的计算引擎。 前提条件 已安装Hadoop，具体请参见Hadoop对接OBS。 注意事项 为了减少日志输出，在/opt/spark-2.3.3/conf/log4j.properties文件中增加配置：
登录OBS Browser时，登录界面无反应 问题 登录客户端时，登录界面无反应。 Windows 32位的OBS Browser更新为Windows 64位的，登录OBS Browser，界面无反应。 回答 请删除C盘用户目录AppData\Local下的obs文件夹以清理OBS
OBS支持使用HTTPS协议访问吗？ OBS对HTTPS的支持情况如下： OBS桶域名：支持，在浏览器中将桶或对象的URL的http替换成https即可。 OBS自定义域名：暂不支持，如需使用请提交工单。 开启CDN加速后的OBS加速域名：支持，开启CDN加速后可通过CDN管理控
Expires x-obs-id-2 x-reserved-indicator x-obs-version-id x-obs-copy-source-version-id x-obs-storage-class x-obs-delete-marker x-obs-expiration
上传文件或文件夹 背景知识 OBS Browser使用分段上传功能上传文件。通过分段上传功能，OBS Browser支持上传最大为48.8TB的单个文件。 OBS Browser支持断点续传。当上传任务暂停或者失败，重新启动上传任务，根据任务记录的分片信息，已上传成功的分片不会再次上传，会请求上传其他的分片。
快速入门 OBS服务环境搭建 开发环境准备 安装SDK 获取服务地址 配置桶允许跨域请求 初始化OBS客户端 上传对象 下载对象 列举对象 删除对象 OBS客户端通用示例 预定义常量
下载文件或文件夹 操作步骤 登录OBS Browser。 单击待操作的桶，选中需要下载的文件或文件夹后，单击右键选择“下载”。 客户端支持批量下载，选择多个文件或文件夹，单击对象列表上方的“下载”即可批量下载对象。 对于存储类别为归档存储的桶中的文件，需要确认对象的状态为“已恢复”才能对其进行下载。
在ECS上通过内网访问OBS方案概述 应用场景 某企业基于弹性云服务器（Elastic Cloud Server，ECS）构建好基础的业务后，随着数据增长，硬盘已无法满足大量的图片、视频等数据存取需求。了解到华为云提供有海量、弹性的云存储服务OBS后，决定将OBS作为数据存储资源池，以减轻服务器负担。
Browser+下载地址及具体操作请参见下载OBS Browser+。 登录OBS Browser+ 由于OBS Browser+默认使用公网访问OBS，因此在登录OBS Browser+时，“服务提供商”和“服务器地址”需要按照以下要求填写： 服务提供商：选择“其他对象存储服务”。 服务器地址：根据ECS
NONE：不加密，直接写入数据。 KMS：使用数据加密服务中的KMS进行加密。如果启用KMS加密则无法进行数据的MD5校验。 toJobConfig.kmsID 否 String 上传时加密使用的密钥。需先在密钥管理服务中创建密钥。 toJobConfig.projectID 否
示例5：创建OBS转储 场景描述 本章以将指定的一个或多个日志流的日志转储到OBS服务为例。 涉及其它云服务接口 创建OBS转储时，需要查询用户的桶列表： 获取桶列表：确定将要配置转储的桶名称。 创建OBS转储 接口相关信息 URI格式：POST /v2/{project_id}/log-dump/obs
根据专线带宽决定 根据专线距离以及带宽收费，具体参见云专线价格详情 OBS工具方式 OBS工具方式适用于百GB规模的数据搬迁。OBS提供OBS Browser+、obsutil等多种客户端工具，方便用户在本地直接将数据上传至OBS。由于上传需要占用用户公网带宽，为不影响用户在公网上的主营业
配置Hive通过IAM委托访问OBS 参考配置MRS集群通过IAM委托对接OBS完成存算分离集群配置后，即可在Hive客户端创建Location为OBS路径的表。 建表时指定Location为OBS路径 使用安装客户端用户登录客户端安装节点。 执行如下命令初始化环境变量。 source 客户端安装目录/bigdata_env
OBS如何实现备份和容灾？ OBS通过如下方式实现备份和容灾： 创建桶时开启多AZ属性，用户数据冗余存储至多个AZ中。 通过跨区复制功能。用户可以将一个区域的桶中数据复制到另一个区域，实现云端备份。 将OBS中的数据下载到本地，本地备份数据。 父主题： 数据安全、迁移和备份
OBS服务环境搭建 注册云服务账号 使用OBS之前必须要有一个云服务账号。 打开浏览器。 登录公有云网站。 在页面右上角单击“注册”。 按需填写注册信息并单击“同意协议并注册”。 开通OBS服务 使用OBS服务之前必须先充值，才能正常使用OBS服务。 登录管理控制台。 单击页面右上角的“费用和成本”进入费用中心页面。
ObsClient初始化(Go SDK) 功能说明 ObsClient是访问OBS服务的Go客户端，它为调用者提供一系列与OBS服务进行交互的接口，用于管理、操作桶（Bucket）和对象（Object）等OBS服务上的资源。使用OBS Go SDK向OBS发起请求，您需要初始化一
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
