-
mox.file与本地接口的对应关系和切换 - AI开发平台ModelArts
DeleteRecursively 一键切换 一键切换的API实现方式为对基础API进行函数替换,在多进程或者多线程环境中一键切换的API可能会带来一些未知问题,因此建议直接调用moxing API即可实现功能的代码尽量不要用这个一键切换功能。 一键切换的API全局只能执行一次,不要在训练脚本中多次调用,避免导致训练失败。
-
上传镜像 - AI开发平台ModelArts
${image_version} 上传镜像完成后,返回容器镜像服务控制台,在“我的镜像”页面,执行刷新操作后可查看到对应的镜像信息。 常见问题 为什么使用客户端上传镜像失败? 父主题: 单机单卡
-
保存Notebook镜像环境 - AI开发平台ModelArts
“镜像管理”页面查看到该镜像详情。 单击镜像的名称,进入镜像详情页,可以查看镜像版本/ID,状态,资源类型,镜像大小,SWR地址等。 常见问题 镜像保存时报错“there are processes in 'D' status, please check process status
-
准备算法简介 - AI开发平台ModelArts
型的验证与评估。 增量学习 增量学习是一个连续不断的学习过程。相较于离线学习,增量学习不需要一次性存储所有的训练数据,缓解了存储资源有限的问题;另一方面,增量学习节约了重新训练中需要消耗大量算力、时间以及经济成本。 相关参考 AI Gallery的资产集市中提供了常见的数据集和算
-
准备代码 - AI开发平台ModelArts
scripts/install.sh文件。具体为删除install.sh的第43行 "git cherrypick 171ba0b3"。该问题会导致代码安装失败,会在后续版本修复。 代码上传至OBS 将AscendSpeed代码包AscendCloud-3rdLLM-905-xxx
-
AI开发基本流程介绍 - AI开发平台ModelArts
AI开发的基本流程通常可以归纳为几个步骤:确定目的、准备数据、训练模型、评估模型、部署模型。 图1 AI开发流程 确定目的 在开始AI开发之前,必须明确要分析什么?要解决什么问题?商业目的是什么?基于商业的理解,整理AI开发框架和思路。例如,图像分类、物体检测等等。不同的项目对数据的要求,使用的AI开发手段也是不一样的。
-
如何安装第三方包,安装报错的处理方法 - AI开发平台ModelArts
如何安装第三方包,安装报错的处理方法 问题现象 ModelArts如何安装自定义库函数,例如“apex”。 ModelArts训练环境安装第三方包时出现如下报错: xxx.whl is not a supported wheel on this platform 原因分析 由于安装的文件名格式不支持,导致出现“xxx
-
创建训练作业时出现“实例挂卷失败”的事件 - AI开发平台ModelArts
创建训练作业时出现“实例挂卷失败”的事件 问题现象 训练作业的状态一直在“创建中”,查看训练作业的“事件”,有异常信息“实例挂卷失败”,详情为“Unable to mount volumes for pod xxx ... list of unmounted volumes=[nfs-x]”。
-
VS Code一键连接Notebook - AI开发平台ModelArts
当弹出如下错误时,代表实例连接失败,请关闭弹窗,并查看OUTPUT窗口的输出日志,请查看FAQ并排查失败原因。 图11 实例连接失败 常见问题 在ModelArts控制台界面上单击VS Code接入并在新界面单击打开,未弹出VS Code窗口 远程连接出现弹窗报错:Could not
-
VS Code ToolKit连接Notebook - AI开发平台ModelArts
Code环境左下角显示类似下图即为连接成功。 图11 连接成功 相关操作 卸载VS Code插件操作如图12所示。 图12 卸载VS Code插件 常见问题 报错“Permissions for 'x:/xxx.pem' are too open”如何解决? 报错“ssh: connect to
-
训练作业日志中提示“No module named .*” - AI开发平台ModelArts
”安装到“site-package”中才能运行。但是在ModelArts可以将“project_dir”加入到“sys.path”中解决该问题。 使用from module_dir import module_file来导包,代码结构如下: project_dir |- main
-
Notebook基础镜像x86 自定义专用镜像 - AI开发平台ModelArts
环境启动所必要的配置,用户无需对此做任何适配,安装所需的软件包即可使用。 此类镜像为最基础的镜像,主要应对用户做自定义镜像时基础镜像太大的问题,所以镜像中未安装任何组件;如果需使用OBS SDK相关功能,推荐使用ModelArts SDK进行文件复制等操作,详细操作请参考文件传输。
-
服务更新场景 - AI开发平台ModelArts
default="True", description="是否使用jpeg预处理加速算子(仅支持jpeg格式数据),可加速数据读取,提升性能,默认启用。如果数据格式不是jpeg格式,开启数据清洗功能即可使用")) ] ), inputs=[wf.steps
-
机器学习端到端场景 - AI开发平台ModelArts
default="True", description="是否使用jpeg预处理加速算子(仅支持jpeg格式数据),可加速数据读取,提升性能,默认启用。如果数据格式不是jpeg格式,开启数据清洗功能即可使用")) ] ), inputs=[wf.steps
-
IAM - AI开发平台ModelArts
工作空间 dataset 数据集 dataAnnotation 数据集的标注信息 aiAlgorithm 训练算法 image 镜像 devserver 弹性裸金属 ModelArts资源权限项 参考《ModelArts API参考》中的权限策略和授权项。 数据管理权限 开发环境权限
-
基于ModelArts Standard一键完成商超商品识别模型部署 - AI开发平台ModelArts
停止在线服务:在“在线服务”列表,单击对应服务操作列的“更多 > 停止”。 删除在线服务:在“在线服务”列表,单击对应服务操作列的“更多 > 删除”。 常见问题 订阅的AI应用一直处于等待同步状态 服务预测失败
-
模型包规范介绍 - AI开发平台ModelArts
delArts样例列表。ModelArts也提供了常用AI引擎对应的自定义脚本示例,请参见自定义脚本代码示例。 若您在导入元模型过程中遇到问题,可联系华为云技术支持协助解决故障。 模型包结构示例 TensorFlow模型包结构 发布该模型时只需要指定到“ocr”目录。 OBS桶/目录名
-
基于ModelArts Standard一键完成商超商品识别模型部署 - AI开发平台ModelArts
停止在线服务:在“在线服务”列表,单击对应服务操作列的“更多 > 停止”。 删除在线服务:在“在线服务”列表,单击对应服务操作列的“更多 > 删除”。 常见问题 订阅的AI应用一直处于等待同步状态 服务预测失败 父主题: 推理部署
-
图像分类 - AI开发平台ModelArts
或“已标注”页签中,单击“同步新数据”,快速将数据集中的数据添加到标注作业中。 问题现象: 将已标注好的数据上传至OBS,同步数据后,显示为未标注。 原因分析: 可能是OBS桶设置了自动加密导致此问题。 解决方法: 需要新建OBS桶重新上传数据,或者取消桶加密后,重新上传数据。 筛选数据
-
官方案例列表 - AI开发平台ModelArts
当一个华为云账号下需创建多个IAM用户(即子用户)时,可参考此样例,为IAM用户赋予使用ModelArts所需的权限。避免IAM用户因权限问题导致使用时出现异常。 自动学习样例列表(基础教程) 表1 自动学习样例列表 样例 对应功能 场景 说明 口罩检测 自动学习 物体检测 基于AI