正在生成
详细信息:
检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
当用户新创建一个桶时,如果不指定相应的ACL权限,OBS Browser+自动将该桶设置为仅允许桶的所有者访问,其他任何人无法访问该桶及桶内的对象。 使用命令行工具obsutil 命令结构: Windows操作系统 obsutil chattri obs://bucket [-sc=xxx] [-acl=xxx]
(可选)单击“统计信息”下方的“导出”,可导出当前列表展示的全部统计信息或选中的统计信息。 (可选)在统计列表上方的选择框中,可根据属性筛选统计信息。 使用命令行工具obsutil 统计文件夹中的对象数量 obsutil不支持直接统计文件夹中的对象数量和大小,您可以进行列举对象。 查询文件夹大小 以Linux操作系统为例,运行
重启MapReduce2集群。 增加Hive对接OBS的jar包 执行以下命令,在Hive Server节点创建auxlib文件夹。 mkdir /usr/hdp/3.0.1.0-187/hive/auxlib 执行以下命令,将OBSA-HDFS工具的jar包放到auxlib文件夹。 cp
0025 无效的IP地址或域名地址,请重新输入。 Obs.0026 文件的绝对路径总长度不能超过1023字符,请重试。 Obs.0027 连接代理服务器失败,请检查网络或者代理服务器身份认证信息。 Obs.0028 目标桶不存在或目标桶与当前桶不属于同一区域,请确认后重新操作。 Obs
putObject、uploadFile、uploadPart、getObject、downloadFile √ √ × √ × √ 支持长短连接配置 N/A √ √ × √ √ √ 支持配置日志 N/A √ √ √ √ √ √ 表2 OBS SDK功能矩阵2 接口类型 接口名 函数名/特性归属函数名
client.configuration.maxConcurrentUploadRequestCount = 5; // 分段上传请求的最大连接数 client.configuration.uploadSessionConfiguration.HTTPMaximumConnectionsPerHost
需要注意的是,如果在上传过程中,本地目录中的文件有新增则无法保证工具最终上传的对象数目和本地目录内文件数目的一致性;如果希望同步这部分新增文件可以在上传完成后重新执行增量上传命令。 父主题: 常见问题
方式二:在启动obsftp时指定端口范围(指定的端口需要包含在防火墙放通的端口范围内)。以指定50000~60000范围内端口为例,启动obsftp的命令如下: python FTPServerStart.py --passive_ports_start=50000 --passive_ports_end=60000
调优最佳实践。 需要注意的是,rateLimitThreshold参数指定的是obsutil任务的全局限速,这意味着当使用cp、sync等命令进行批量文件的上传/下载时,最终的实际上传/下载速度上限仍然为rateLimitThreshold指定的阈值而不是批量任务的并发任务数*rateLimitThreshold
启用MD5进行数据一致性校验会影响上传下载性能。 表1 校验数据一致性的方式 方式 说明 操作指导 obsutil 命令行工具,可以通过简单的一行命令实现上传下载,并且在命令中选择是否采用MD5校验。 使用obsutil校验上传对象的一致性 使用obsutil校验下载对象的一致性 OBS
使用getcondition.image_process_config指定图片处理参数。 图片处理参数当前仅支持命令方式,即image/commands格式。 图片处理参数支持级联处理,可对图片文件依次实施多条命令。 父主题: 下载对象
性能或功能,使用时需要注意以下细节: 挂载目录中的文件或文件夹不支持硬链接命令。 创建的目录深度不超过45层。 因使用FUSE框架存在内核态与用户态切换,不适合高并发场景。 ls、stat等linux命令需要远程访问OBS服务器,所以性能较差。 一个并行文件系统支持挂载到多台云服
参数解释: 图片处理参数,描述针对对象的图片处理命令或处理样式。例如如果想表示对图片依次进行缩放、旋转,取值:image/resize,m_fixed,w_100,h_100/rotate,90。 取值范围: 命令方式:image/命令参数 样式方式:style/样式名称 详细参数说明参见处理图片。
桶中不完整的数据称之为碎片。OBS采用分块上传的模式上传数据,在下列情况下(但不仅限于此)通常会导致数据上传失败而产生碎片。 网络条件较差,与OBS的服务器之间的连接经常断开。 上传过程中,人为中断上传任务。 设备故障。 突然断电等特殊情况。 以下步骤以控制台手动删除碎片为例。通过其他方式删除碎片的方法,请参见清理碎片。
参数解释: 图片处理参数,描述针对对象的图片处理命令或处理样式。例如如果想表示对图片依次进行缩放、旋转,取值:image/resize,m_fixed,w_100,h_100/rotate,90。 取值范围: 命令方式:image/命令参数。 样式方式:style/样式名称。 详细参数说明参见处理图片。
string 可选 参数解释: 图片处理参数,描述针对对象的图片处理命令或处理样式。例如如果想表示对图片依次进行缩放、旋转,取值:image/resize,m_fixed,w_100,h_100/rotate,90。 取值范围: 命令方式:image/commands 样式方式:style/stylename
参数解释: 图片处理参数,描述针对对象的图片处理命令或处理样式。例如表示对图片依次进行缩放、旋转,取值:image/resize,m_fixed,w_100,h_100/rotate,90。 取值范围: 命令方式:image/命令参数。 样式方式:style/样式名称。 详细参数说明参见处理图片。
解决思路: 在网络不通的情况下优先解决本地网络问题;如需配置代理可以参考为obsutil配置HTTP代理。 在偶现该问题的情况下,可以考虑重试命令以规避该问题;针对上传/下载/复制等场景,可以在执行cp时指定-u参数进行增量上传,可以避免重试批量任务中已经成功完成的部分任务。 在网络
右键待删除的文件或文件夹,并单击“删除”。 也可以选中多个文件或文件夹,单击文件列表上方的“更多>删除”进行批量删除。 在消息确认框中单击“是”。 使用命令行工具obsutil 命令结构: Windows操作系统 删除单个对象 obsutil rm obs://bucket/key [-f] [-versionId=xxx]
许对桶进行写入、该用户无桶的写入权限等)。 请检查桶的ACL设置和桶策略配置,排查错误。 单击消息提示框中的“确定”。 使用命令行工具obsutil 命令结构: Windows操作系统 在指定桶内创建文件夹 obsutil mkdir obs://bucket/folder[/s