检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
引用数据 将其他项目或OBS桶中的数据,引用到本项目,不可在本项目中操作该数据。 单击“添加数据”,类型选择“引用”。 图3 引用数据 选择需要引用的项目以及项目中的数据,或者选择待引用的OBS桶路径,先选择OBS桶所在区域,再选择OBS桶名称,支持选择不在同一区域的OBS桶。
图5 解除引用 下载数据 下载数据操作会产生流量费用,计费方式为按需计费,计费详情请参考OBS数据下载费用。 以下操作步骤是在“数据”页面下载数据至本地。您也可以使用命令行工具实现数据的下载。 展开数据文件夹,选择待下载的数据。 单击“操作”列“下载”。
修改已完成作业的保留数目 health edit retention completed-jobs --number 10000 # 执行成功返回结果如下 set the retention of completed-jobs successfully! 父主题: 系统设置命令
图2 复制数据 引用数据 引用数据可以引用其他项目中或对应的obs桶的数据。引用的数据不能在该项目中进行更改。只能用来运行作业,导入数据到数据库等操作。 图3 引用数据 URL导入数据 以URL导入的方式添加数据类似于linux中的wget操作。
数据管理 数据归档 数据管理 数据作业管理 OBS桶管理 父主题: API(医疗智能体平台)
直接挂载OBS目录进行大规模计算,如何解决偶现报错
附录 状态码 错误码(医疗智能体与盘古辅助制药平台) 错误码(AI辅助药物设计) 获取项目ID 配置OBS访问权限
加速类型: 加速效率:IO加速>本地盘加速>无 无:作业运行于OBS中,不使用加速。 IO加速:IO加速使用弹性文件服务(SFS)提供高性能的数据读写,作业运行时,会将非最终结果的数据存储在SFS中用以提高任务运行效率,作业执行完成后会清理释放SFS空间。
加速类型: 加速效率:IO加速>本地盘加速>无 无:作业运行于OBS中,不使用加速。 IO加速:IO加速使用弹性文件服务(SFS)提供高性能的数据读写,作业运行时,会将非最终结果的数据存储在SFS中用以提高任务运行效率,作业执行完成后会清理释放SFS空间。
应用场景 基因组分析 提供从基因组数据管理、生物信息分析流程到科研分析管理整个流程的服务,快速实现基因组数据分析及AI建模,提供高性能、高可靠性、高性价比的基因测序计算、存储、分析和AI能力支持,让科研过程标准化、可执行。
存储路径 单击“存储路径”右侧文件夹图标,设置用于存储Notebook数据的OBS路径。如果想直接使用已有的文件或数据,可将数据提前上传至对应的OBS路径下。 包含本项目桶最多挂载6个,不包含本项目桶最多挂载5个。
--crr -c 否 复制时使用客户端跨区域复制模式,以通过数据流的方式从源桶直接复制数据到目标桶,且两个桶可以是任意两个OBS服务的桶。 若设置了该参数,必须确保更新了配置文件中客户端跨区域复制的相关配置信息,具体可参考更新配置文件。
--jobs -j 否 批量删除分段上传任务的最大并发数,默认为配置文件中的defaultJobs。 批量删除分段上传任务时该参数可选。
支持配置为auto,此时obsutil会根据源对象大小自动设置每个分段任务的段大小。 --cpd -C 否 生成断点记录文件的文件夹,默认为运行obsutil命令的用户目录的子文件夹.obsutil_checkpoint。
加速类型: 加速效率:IO加速>本地盘加速>无 无:作业运行于OBS中,不使用加速。 IO加速:IO加速使用弹性文件服务(SFS)提供高性能的数据读写,作业运行时,会将非最终结果的数据存储在SFS中用以提高任务运行效率,作业执行完成后会清理释放SFS空间。
用户管理 用户管理介绍 创建子用户 导入用户 登录平台方式 管理用户 父主题: 用户指南(基因平台)
存储路径 单击“存储路径”右侧文件夹图标,设置用于存储Notebook数据的OBS路径。如果想直接使用已有的文件或数据,可将数据提前上传至对应的OBS路径下。 包含本项目桶最多挂载6个,不包含本项目桶最多挂载5个。
--o -o 否 生成结果清单文件的文件夹,命令执行完成后,会在该文件夹下生成结果清单文件(可能包含成功结果和失败结果两个文件),默认为运行obsutil命令的用户目录的子文件夹.obsutil_output。
加速类型: 加速效率:IO加速>本地盘加速>无 无:作业运行于OBS中,不使用加速。 IO加速:IO加速使用弹性文件服务(SFS)提供高性能的数据读写,作业运行时,会将非最终结果的数据存储在SFS中用以提高任务运行效率,作业执行完成后会清理释放SFS空间。
加速类型: 加速效率:IO加速>本地盘加速>无 无:作业运行于OBS中,不使用加速。 IO加速:IO加速使用弹性文件服务(SFS)提供高性能的数据读写,作业运行时,会将非最终结果的数据存储在SFS中用以提高任务运行效率,作业执行完成后会清理释放SFS空间。