-
修改资源池作业类型 - AI开发平台ModelArts
为了支持不同的作业类型,后台需要在专属资源池上进行不同的初始化操作,例如安装插件、设置网络环境等。其中部分操作需要占据资源池的资源,导致用户实际可用资源减少。因此建议用户按需设置,避免不必要的资源浪费。 约束限制 专属资源池状态处于“运行中”。
-
Step6 在ModelArts上创建训练作业 - AI开发平台ModelArts
训练作业创建完成后,后台将自动完成容器镜像下载、代码目录下载、执行启动命令等动作。 训练作业一般需要运行一段时间,根据您的训练业务逻辑和选择的资源不同,训练时长将持续几十分钟到几小时不等。训练作业执行成功后,日志信息如图1所示。
-
查询Subscription详情 - AI开发平台ModelArts
创建订阅时,后台自动生成。 topic_urns Array of strings 订阅的主题。 entity String 订阅的主体。 events Array of strings 订阅的事件。
-
创建训练任务 - AI开发平台ModelArts
训练作业创建完成后,后台将自动完成容器镜像下载、代码目录下载、执行启动命令等动作。 训练作业一般需要运行一段时间,根据您的训练业务逻辑和选择的资源不同,训练时长将持续几十分钟到几小时不等。 父主题: 单机单卡
-
Step6 在ModelArts上创建训练作业 - AI开发平台ModelArts
训练作业创建完成后,后台将自动完成容器镜像下载、代码目录下载、执行启动命令等动作。 训练作业一般需要运行一段时间,根据您的训练业务逻辑和选择的资源不同,训练时长将持续几十分钟到几小时不等。训练作业执行成功后,日志信息如图1所示。
-
创建训练任务 - AI开发平台ModelArts
训练作业创建完成后,后台将自动完成容器镜像下载、代码目录下载、执行启动命令等动作。 训练作业一般需要运行一段时间,根据您的训练业务逻辑和选择的资源不同,训练时长将持续几十分钟到几小时不等。训练作业执行成功后,日志信息如下所示。 父主题: 单机多卡
-
创建训练任务 - AI开发平台ModelArts
训练作业创建完成后,后台将自动完成容器镜像下载、代码目录下载、执行启动命令等动作。 训练作业一般需要运行一段时间,根据您的训练业务逻辑和选择的资源不同,训练时长将持续几十分钟到几小时不等。训练作业执行成功后,日志信息如下所示。 父主题: 多机多卡
-
导入模型 - AI开发平台ModelArts
如果已在模型配置文件中配置apis信息时,则可不填,后台自动从配置文件的apis字段中读取输入参数信息。 output_params 否 params结构数组 模型推理输出参数列表,默认为空。
-
创建算法 - AI开发平台ModelArts
训练数据比较大,训练代码目录在训练作业启动后会下载至后台,可能会有下载失败的风险。 训练作业创建完成后,ModelArts会将代码目录及其子目录下载至训练后台容器中。
-
在VS Code中远程调试代码 - AI开发平台ModelArts
如果执行较长时间的训练任务,建议使用nohup命令后台运行,否则SSH窗口关闭或者网络断连会影响正在运行的训练任务,命令参考: nohup your_train_job.sh > output.log 2>&1 & tail -f output.log 如果要对代码进行debug
-
ModelArts - AI开发平台ModelArts
通过华为云智能边缘平台(IEF服务),在边缘节点将模型部署为一个Web Service。
-
故障恢复 - AI开发平台ModelArts
开发环境故障恢复 针对用户创建的Notebook计算实例,后台计算节点故障后会立即自动迁移到其他可用节点上,实例状态会自动恢复。针对数据存储部分,提供了云硬盘存储挂载方式,华为云云硬盘提供高可靠、高性能、规格丰富并且可弹性扩展的块存储服务,数据持久性高达99.9999999%。
-
新建Workflow执行 - AI开发平台ModelArts
工作流创建时后台自动生成。 description 否 String 执行记录描述。 status 否 String 执行记录状态。 workspace_id 否 String 工作空间ID。 workflow_id 否 String 工作流ID。
-
发布免费模型 - AI开发平台ModelArts
发布使用容器镜像导入的资产时,后台会进行资产安全扫描,如果扫描发现资产有问题,则资产发布失败并邮件通知发布者。 父主题: 发布分享
-
更新服务配置 - AI开发平台ModelArts
边缘节点ID数组,节点ID为IEF(智能边缘平台)的边缘节点ID,在IEF上创建边缘节点后可得到。 mapping_rule 否 Object batch服务类型可选。输入参数与csv数据的映射关系,仅当mapping_type为csv时需要填写。
-
更新Execution - AI开发平台ModelArts
工作流创建时后台自动生成。 description 否 String 执行记录描述。 status 否 String 执行记录状态。 workspace_id 否 String 工作空间ID。 workflow_id 否 String 工作流ID。
-
动态挂载OBS并行文件系统 - AI开发平台ModelArts
挂载时,后台自动会在Notebook容器的“/data/”目录下创建该文件夹,用来挂载OBS文件系统。 选择存放OBS并行文件系统下的文件夹,单击“确定”。 图1 动态挂载OBS并行文件系统 挂载成功后,可以在Notebook实例详情页查看到挂载结果。
-
训练模型时引用依赖包,如何创建训练作业? - AI开发平台ModelArts
“pip-requirements.txt”文件内容如下所示: alembic==0.8.6 bleach==1.4.3 click==6.6 依赖包为whl包时 如果训练后台不支持下载开源安装包或者使用用户编译的whl包时,由于系统无法自动下载并安装,因此需要在“代码目录”放置此
-
扩缩容资源池 - AI开发平台ModelArts
扩缩容完成后,节点的可用区分布由系统后台随机选择。 选择指定AZ时,可指定扩缩容完成后节点的可用区分布。 图2 资源配置 修改容器引擎空间大小 若您需要更大的容器引擎空间,您可以通过以下操作调整容器引擎空间大小。
-
身份认证与访问控制 - AI开发平台ModelArts
ModelArts服务不会保存用户的Token认证凭据,在后台作业中操作用户的资源(如OBS桶)前,需要用户通过IAM委托向ModelArts显式授权,ModelArts在需要时使用用户的委托获取临时认证凭据用于操作用户资源,具体配置见配置访问授权章节。