检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
如何将Notebook中的数据下载至本地 在Notebook页面,可以通过“Upload”和“Download”上传和下载文件。当在Notebook中上传文件提示大小受限时,您可以根据以下不同场景将大文件上传或下载到Notebook中。 图1 上传和下载文件 OBS存储类型的Notebook
直接挂载OBS目录进行大规模计算,如何解决偶现报错 问题现象 运行作业时,作业直接挂载OBS目录进行大规模计算。偶现“异常应用”,并日志报错input/output error或file xxx not exists。 问题原因 OBS集群到计算集群之间的带宽达到了上限。 OBS集群的IOPS达到了上限。
上传大于1GB数据 当数据过大,或者数据处于服务器上时,页面传输并不是很方便,所以可以利用EIHealth平台的命令行工具进行数据文件、文件夹传输。命令行配置方法请参见配置命令行工具。 上传数据 使用命令行工具upload命令,将本地数据上传到EIHealth平台中。该命令不支持将数据上传到引用目录。
从搭建、执行NGS流程中可以看出,图形化的操作界面提供了友好、便捷的操作体验,但是当面临大批量的测序数据时,需要重复设置输入、输出、执行等步骤。为进一步提高NGS流程的执行效率,本章节介绍如何通过循环读取输入数据,批量运行NGS。同时,您也可以参考本示例,将批量运行的方法复制到其他的分析任务中。
Notebook的简要描述。 镜像类型 选择自定义镜像。 工作环境 选择已上传的自定义镜像。 CPU 设置CPU大小。 GPU 设置GPU大小。 内存 设置内存大小。 存储路径 单击“存储路径”右侧文件夹图标,设置用于存储Notebook数据的OBS路径。如果想直接使用已有的文件或数据,可将数据提前上传至对应的OBS路径下。
数据控制与数据审计 数据保护策略 项目内的数据支持精细化的权限控制,可对数据分享、下载、删除进行设置。您可以在项目的“设置”页面设置数据权限。数据权限仅可以有项目所有者设置。 分享:关闭分享后,项目内数据不允许分享给其他项目,包括拷贝、引用两种方式。 下载:关闭下载后,项目内数据不允许下载至本地。
扩大配额。 EIHealth平台应用的基础设施如下: 统一身份认证(IAM) 容器镜像服务(SWR) 对象存储服务(OBS) 关于如何查看配额,如何申请扩大配额,请参见“《用户指南》 配额管理”章节。
环境。 使用自己的电脑搭建Docker环境。 使用华为云弹性云服务器ECS搭建Docker环境。 本示例中使用华为云弹性服务器ECS,并通过ECS搭建Docker环境。在创建ECS时,可以选择ECS的操作系统。例如,ECS如果为Linux操作系统,可以依次执行如下命令快速安装容器引擎。
None 医学文本标注 医疗智能体 EIHealth 使用ModelArts进行数据管理和标注 07:08 医学文本管理和标注 医疗智能体 EIHealth 使用ModelArts进行团队标注 05:44 医学文本团队标注 药物虚拟筛选 医疗智能体 EIHealth 药物虚拟筛选
选择“工具>Nextflow”,单击“新建流程”。 填写流程基本信息。 名称:设置流程名称。名称长度为1-56,只允许出现中划线、下划线、字母和数字。 标签:选择流程标签,最多可添加5个。 描述:设置流程相关描述。 单击“下一步”,添加流程文件。 单击“流程文件”后面的“添加”,添加流程文件。
3. 搭建流程 4. 执行分析作业 常见问题 了解更多常见问题、案例和解决方案 热门案例 AK/SK是什么?如何获取AK/SK 如何搭建Docker环境? 如何制作镜像? 如何将生物信息学软件封装为镜像? 更多 远程登录 应用容器化改造介绍 应用容器化改造流程 步骤1:对应用进行分析
方式一:对于输入参数,打开“并发”开关,在启动作业时,每个参数可以设置多个参数值,自动生成多个作业并发执行。并发执行的作业数为设置的参数值个数的乘积。 例如,存在输入参数a和输入参数b,在启动作业时,分别给参数a设置了2个参数值,给参数b设置了2个参数值。那么,系统将自动生成4个作业并发执行。
该参数用于获取任务实例事件列表。不带该参数,默认输出任务实例详情(默认json格式)。 --file-path -p 否 获取任务实例详情时,设置任务实例详情下载路径。 --yaml -y 否 获取任务实例详情时,以yaml格式输出任务实例详情(默认json格式)。 --project
流程、作业 应用的参数和镜像启动命令如何设置 直接挂载OBS目录进行大规模计算,如何解决偶现报错
在新建作业弹窗中单击“确定”。 图2 新建作业 在弹出的作业设置页面,填写作业信息。“作业名称”、“标签”、和“描述”,选择需要执行的流程,设置“输出路径”、“优先级”、“计算节点标签”、“超时时间”、“加速类型”。设置完成后单击“确定”。 基本信息:包含作业名称、标签、描述。
选择“作业>分析作业>Nextflow”,单击“新建作业”。 设置作业参数。 作业名称:设置作业名称。名称长度为1-63,只允许出现中划线、字母和数字。 标签:设置作业标签。最多可以设置5个。 描述:作业描述。 流程名称:选择已创建的流程,如果还未创建,可参考新建流程进行创建。 优先级:设置作业优先级。在资源充足的情
附加参数,可选。 修改权限的目录或文件绝对路径。 --delete-policy -d 附加参数,可选。 设置目录或文件是否允许删除。取值包括:allow、deny。 命令示例 设置路径不可删除。 chattri -p /path/1/ -d deny chattri /path/1/
请求Body参数 参数 是否必选 参数类型 描述 schedulable 是 Boolean 是否可调度 响应参数 无 请求示例 设置是否可调度,设置为可调度 https://eihealth.cn-north-4.myhuaweicloud.com/v1/{project_id
最大值:1000 disk_encrypt 是 Boolean 磁盘是否加密 响应参数 无 请求示例 创建数据库资源,选择规格,设置磁盘大小为0,设置磁盘加密 https://eihealth.cn-north-4.myhuaweicloud.com/v1/{project_id
选择“自定义”镜像。 工作环境 选择“genomeagent”镜像。 CPU 设置CPU为4.0核。 GPU 设置GPU为0。 内存 设置内存大于8G。 存储路径 单击“存储路径”右侧文件夹图标,设置用于存储Notebook数据的OBS路径。如果想直接使用已有的文件或数据,可将数据提前上传至对应的OBS路径下。