检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
传统的自建存储服务器已不能满足大量的数据存储需求,主要原因可以归类为以下三点: 数据存储量受限于搭建服务器时使用的硬件设备,如果存储量不够,需要重新购买存储硬盘,进行人工扩容。 前期安装难、设备成本高、初始投资大、自建周期长、无法匹配快速变更的企业业务。 需承担网络信息安全、技术漏洞、误操作等各方面的数据安全风险。
安装datax。 解压datax.tar.gz到/opt/datax目录。 在Github下载hadoop-huaweicloud:下载地址。(建议使用hadoop 2.8.3版本下最新版本的hadoop-huaweicloud版本,例如hadoop-huaweicloud-2.8.3-hw-53
AccessKeyID/bucketname ; 密码为: AccessSecretyKeyID。 登录成功后,您便可以使用常用的FTP命令来管理存储在OBS上的文件。 父主题: 安装和使用obsftp
使用备份软件实现本地数据备份至OBS 使用场景 传统的备份与恢复方案需要将备份数据写入磁带等存储设备,然后再运输至数据中心。在此过程中数据的安全及完整性依赖很多因素,比如硬件、人员等等。无论是从前期搭建数据中心还是后期的维护,都使得传统的备份与恢复方案面临着管理复杂、投入成本高的难题。
Windows系统 前提条件 在使用本工具前,您需完成注册华为帐号并开通华为云,开通OBS,并创建一个可用的桶。 已下载obsftp工具。 工具下载地址:https://github.com/huaweicloud-obs/obsftp 在Windows上使用此工具前需要您先完成Python安装。
流量费用 流量是在使用和访问对象存储服务OBS时,产生的数据流量累计值。流量包括内/公网流入流量、内网流出流量、公网流出流量、跨区域复制流量、回源流量等。OBS会根据您实际使用时产生的流量进行费用收取。 计费说明 资费项 计费项 含义 适用的计费模式 流量费用 内/公网流入流量
必选 bucket 请求使用的桶资源路径,在整个系统中唯一标识一个桶。 可选 domain 存放资源的服务器的域名或IP地址。 必选 port 请求使用的端口号。根据软件服务器的部署不同而不同。缺省时使用默认端口,各种传输协议都有默认的端口号,如HTTP的默认端口为80,HTTPS的默认端口为443。
我可以使用标签做什么? 当为桶添加标签时,该桶上所有请求产生的计费话单里都会带上这些标签,从而可以针对话单报表做分类筛选,进行更详细的成本分析。例如:某个应用程序在运行过程会往桶里上传数据,我们可以用应用名称作为标签,设置到被使用的桶上。在分析话单时,就可以通过应用名称的标签来分析此应用的成本。
创建ObsClient实例 $obsClient = new ObsClient ( [ //推荐通过环境变量获取AKSK,这里也可以使用其他外部引入方式传入,如果使用硬编码可能会存在泄露风险。 //您可以登录访问管理控制台获取访问密钥AK/SK,获取方式请参见https://support
初始化 配置密钥 创建OBS客户端 配置OBS客户端 配置SDK日志 异步调用
临时授权访问 使用临时URL进行授权访问
设置访问日志 日志简介 开启桶日志 查看桶日志配置 关闭桶日志
静态网站托管 静态网站托管简介 网站文件托管 设置托管配置 查看托管配置 清除托管配置
标签管理 标签简介 设置桶标签 查看桶标签 删除桶标签
入门 流程简介 设置用户权限 登录OBS管理控制台 下载OBS Browser 创建访问密钥(AK和SK) 登录客户端 添加桶 上传文件或文件夹 下载文件或文件夹 删除文件或文件夹 删除桶
跨域资源共享 跨域资源共享简介 配置跨域资源共享
外部桶 外部桶简介 挂载外部桶 应用示例一:由桶ACL授权挂载桶的权限 应用示例二:由标准桶策略授权挂载桶的读写权限 应用示例三:由高级桶策略授权挂载桶的读写权限
Browser时,登录界面无反应 通过OBS Browser同时选中大量文件上传时,上传任务没有创建,界面无任何提示 使用OBS Browser上传文件时,出现蓝屏或黑屏现象 使用OBS Browser管理对象时,在任务列表中无相关任务显示 在ECS中,通过OBS Browser下载文件,下载速度慢
权限控制方式介绍 IAM权限 桶策略 ACL
附录 桶策略参数说明 桶策略和ACL的关系