-
使用Grafana配置Dashboards,查看指标数据 - AI开发平台ModelArts
使用Grafana配置Dashboards,查看指标数据 Grafana中可以自定义配置各种视图的仪表盘,ModelArts也提供了针对集群的配置模板。本章节分别以使用ModelArts提供的模板查看指标和创建Dashboards的方式,说明如何进行仪表盘配置。Grafana的更多使用请参考Grafana官方文档。
-
发布免费算法 - AI开发平台ModelArts
Gallery”页面,参考更新已发布资产的版本添加资产版本。 编辑完成后,单击右上方的“保存”完成修改。 图4 编辑算法的版本 关联资产 算法可以关联数据集资产。当算法关联了数据集时,数据集页面也显示关联了算法。 选择“关联资产”页签,单击右上方的“编辑”,在搜索框中输入待关联资产的ID,单击“关联”。 在弹出的“资
-
订阅免费模型 - AI开发平台ModelArts
Gallery的模型列表中展示了算法和模型。 AI Gallery中分享的模型支持免费订阅,但在使用过程中如果消耗了硬件资源进行部署,管理控制台将根据实际使用情况收取硬件资源的费用。 订阅免费模型 登录AI Gallery。 选择“模型”,进入模型列表页面,该页面展示了所有共享的模型,包括ModelArts模型。
-
使用ModelArts Standard自动学习实现口罩检测 - AI开发平台ModelArts
进入“创建物体检测”页面后,填写相关参数。 计费模式:默认按需计费。 名称:自行创建项目名称。 描述:自行描述项目详情,例如口罩检测。 数据集:下拉选择已下载的数据集(步骤2中已成功导入的数据集,默认为下拉数据集列表中的第一个数据集)。 输出路径:选择步骤2的3中的数据集输出位置。 训练规格:根据您的实际需要选择对应的训练规格。
-
k8s Cluster资源购买 - AI开发平台ModelArts
只能以小写字母开头,由小写字母、数字、中划线(-)组成,不能以中划线结尾。 描述 - 专属资源池的简要说明。 使用场景 - 选择“ModelArts Lite”。 计费模式 - 仅支持“包年/包月”。 CCE集群 - 在下拉列表中选择用户账户下已有的CCE集群。如果没有集群,单击右侧的“创建集群”,先去创建集
-
更新管理 - AI开发平台ModelArts
对于已部署的推理服务,ModelArts支持通过更换AI应用的版本号,实现服务升级。 推理服务有三种升级模式:全量升级、滚动升级(扩实例)和滚动升级(缩实例)。了解三种升级模式的流程,请参见图1。 全量升级 需要额外的双倍的资源,先全量创建新版本实例,然后再下线旧版本实例。 滚动升级(扩实例)
-
从模板中选择元模型 - AI开发平台ModelArts
一个“输入输出模式”。 例如,“TensorFlow图像分类模板”,其支持的“输入输出模式”为“预置图像处理模式”,但该模板不允许修改其中的输入输出模式,所以您在页面上只能看到模板默认的输入输出模式,而不能选择其他模式。 支持的输入输出模式请参见支持的输入输出模式。 “AI应用说明”
-
模型训练 - AI开发平台ModelArts
提升。 对用户而言,最终关心的指标是收敛时间,因此ModelArts的MoXing实现了全栈优化,极大缩短了训练收敛时间。在数据读取和预处理方面,MoXing通过利用多级并发输入流水线使得数据IO不会成为瓶颈;在模型计算方面,MoXing对上层模型提供半精度和单精度组成的混合精度
-
参加活动(活动) - AI开发平台ModelArts
在活动详情页,单击“立即报名”进入报名信息页面,根据提示填写个人信息,勾选服务声明后单击“提交”。 报名成功后,活动详情页的“立即报名”会变成“已报名”。 活动报名成功后,不支持取消报名。 (可选)领取活动代金券。如果活动举办方投放了代金券,则在活动报名成功后,可以在“赛事介绍”页签领取代金券。
-
OBS目录导入数据规范说明 - AI开发平台ModelArts
算是给自己的父亲节礼物吧物流很快下单不到24小时就到货了耳机更赞有些低音炮的感觉入耳很紧不会掉棒棒哒 标注文件“COMMENTS_20180919_114745_result.txt”的内容。 positive negative negative positive 此数据格式要求将标注对象和标注文件存
-
模型部署 - AI开发平台ModelArts
力的巨大工程,ModelArts支持将训练好的模型一键部署到端、边、云的各种设备上和各种场景上,并且还为个人开发者、企业和设备生产厂商提供了一整套安全可靠的一站式部署方式。 图1 部署模型的流程 在线推理服务,可以实现高并发,低延时,弹性伸缩,并且支持多模型灰度发布、A/B测试。
-
Pytorch Mox日志反复输出 - AI开发平台ModelArts
INFO:root:Using OBS-Python-SDK-3.1.2 原因分析 Pytorch通过spawn模式创建了多个进程,每个进程会调用多进程方式使用Mox下载数据。此时子进程会不断销毁重建,Mox也就会不断的被导入,导致打印很多Mox的版本信息。 处理方法 为避免训练作业Pytorch
-
训练作业运行失败,出现NCCL报错 - AI开发平台ModelArts
NCCL_SOCKET_IFNAME环境变量设置逻辑后,单击右侧“重建”,重新创建训练作业,提交训练作业后等待作业完成。 等待训练作业是否变成“已完成”状态。 是,故障处理完成。 否,则联系技术支持排查节点状态。 建议与总结 环境变量NCCL_SOCKET_IFNAME用于指定通
-
基于ModelArts Standard一键完成商超商品识别模型部署 - AI开发平台ModelArts
基于ModelArts Standard一键完成商超商品识别模型部署 ModelArts的AI Gallery中提供了大量免费的模型供用户一键部署,进行AI体验学习。 本文以“商超商品识别”模型为例,完成从AI Gallery订阅模型,到ModelArts Standard一键部署为在线服务的免费体验过程。
-
准备数据 - AI开发平台ModelArts
以将数据导入ModelArts数据管理模块进行数据预处理。 ModelArts数据管理模块在重构升级中,对未使用过数据管理的用户不可见。建议新用户将训练数据存放至OBS桶中使用。 图2 准备数据 相关参考 AI Gallery的资产集市中提供了常见的数据集和算法供用户免费使用,具体请参见数据集获取链接、算法获取链接。
-
查找和收藏资产 - AI开发平台ModelArts
查找和收藏资产 AI Gallery共享了算法、Notebook代码样例、数据集、镜像、模型、Workflow等多种AI资产,为了方便快速搜索相关资产,提供了多种快速搜索方式以及收藏功能,提升资产的查找效率。 搜索资产 在各类资产模块页面,通过如下几种搜索方式可以提高资产的查找效
-
ModelArts网络 - AI开发平台ModelArts
项,为了防止在打通VPC的时候有网段的冲突,因此提供了多个CIDR网段的选项,用户可以根据自己的实际情况进行选择。 虚拟私有云VPC是一套为实例构建的逻辑隔离的、由用户自主配置和管理的虚拟网络环境。为云服务器、云容器、云数据库等资源构建隔离的、用户自主配置和管理的虚拟网络环境,提
-
资产识别与管理 - AI开发平台ModelArts
Gallery会将资产保存在AI Gallery官方的SWR仓库内。 对于用户提供的一些个人信息,AI Gallery会保存在数据库中。个人信息中的敏感信息,如手机,邮箱等,AI Gallery会在数据库中做加密处理。 AI Gallery的更多介绍请参见《AI Gallery》。 父主题: 安全
-
从AI Gallery订阅模型 - AI开发平台ModelArts
修改配额”窗口,根据需要选择配额后单击“确定”即可跳转至“部署”页面。 由于商用模型支持同时购买多种配额模式的资产,所以仅部署商用模型时需要进行配额选择。免费模型仅一种配额模式无需选择。 图4 修改配额 若您选择部署的非商业模型,系统自动跳转至“部署”页面。 在部署页面中,无需再
-
Horovod/MPI/MindSpore-GPU - AI开发平台ModelArts
Horovod/MPI/MindSpore-GPU ModelArts训练服务支持了多种AI引擎,并对不同的引擎提供了针对性适配,用户在使用这些引擎进行模型训练时,训练的算法代码也需要做相应适配,本文讲解了使用Horovod/MPI/MindSpore-GPU引擎所需要做的代码适配。