-
分支控制 - AI开发平台ModelArts
通过获取JobStep输出的相关metric指标信息实现 from modelarts import workflow as wf # 构建一个OutputStorage对象,对训练输出目录做统一管理 storage = wf.data.Storage(name="storage_name
-
数据生成 - AI开发平台ModelArts
选择“数据集”,请从下拉框中选择ModelArts中管理的数据集及其版本。要求数据集类型与您在本任务中选择的场景类别一致。 选择“OBS目录”,图像生成算子不需要标注信息,输入支持单层级或双层级目录,存放结构支持“单层级”或“双层级”模式。
-
数据扩增 - AI开发平台ModelArts
其中“Data”文件夹用于存放新生成的图片和标注信息,“manifest”文件存储文件夹中图片的结构,可直接导入到数据管理的数据集中。
-
数据标注 - AI开发平台ModelArts
基于标签修改 在数据标注概览页,单击右侧的“标签管理”,即可显示全部标签的信息。 图6 全部标签的信息 修改标签:在需要修改的标签的“操作”列,单击“修改”,输入修改后的标签,单击“确定”即可。
-
推理服务支持虚拟私有云(VPC)直连的高速访问通道 - AI开发平台ModelArts
需使用新版专属资源池部署服务,详情请参见ModelArts资源池管理功能全面升级。 只有专属资源池部署的服务才支持VPC直连的高速访问通道。 VPC直连的高速访问通道,目前只支持访问在线服务。
-
PyCharm ToolKit连接Notebook - AI开发平台ModelArts
必须与ModelArts管理控制台在同一区域。 “Project”:Region选择后,Project自动填充为Region对应的项目。 “Access Key ID”:填写访问密钥的AK。 “Secret Access Key”:填写访问密钥的SK。
-
开发自定义脚本 - AI开发平台ModelArts
在ModelArts中,训练代码需包含以下步骤: (可选)引入依赖 当您使用自定义脚本创建算法的时候,如果您的模型引用了其他依赖,您需要在“算法管理 > 创建算法”的“代码目录”下放置相应的文件或安装包。 安装python依赖包请参考模型中引用依赖包时,如何创建训练作业?
-
访问在线服务(VPC高速访问通道) - AI开发平台ModelArts
需使用新版专属资源池部署服务,详情请参见ModelArts资源池管理功能全面升级。 只有专属资源池部署的服务才支持VPC直连的高速访问通道。 VPC直连的高速访问通道,目前只支持访问在线服务。
-
托管模型资产 - AI开发平台ModelArts
管理模型文件 预览文件 在模型详情页,选择“模型文件”页签。单击文件名称即可在线预览文件内容。 仅支持预览大小不超过10MB、格式为文本类或图片类的文件。 下载文件 在模型详情页,选择“模型文件”页签。单击操作列的“下载”,即可下载文件到本地。
-
访问在线服务(AK/SK认证) - AI开发平台ModelArts
图1 credential.csv文件内容 AK/SK生成步骤: 注册并登录管理控制台。 单击右上角的用户名,在下拉列表中单击“我的凭证”。 单击“访问密钥”。 单击“新增访问密钥”,进入“身份验证”页面。 根据提示完成身份验证,下载密钥,并妥善保管。
-
使用自定义引擎创建AI应用 - AI开发平台ModelArts
创建AI应用并查看AI应用详情 登录ModelArts管理控制台,进入“AI应用”页面中,单击“创建AI应用”,进入AI应用创建页面,设置相关参数如下: 元模型来源:选择“从对象存储服务(OBS)中选择”。 选择元模型:从OBS中选择一个模型包。
-
数据标注 - AI开发平台ModelArts
在“数据管理”功能中,物体检测类型的数据集,支持更多类型的标注框。 在标注窗口中,您可以滚动鼠标,放大或缩小图片,方便您快速定位到物体位置。 图1 物体检测图片标注 当图片目录中所有图片都完成标注后,单击左上角“自动学习”,在弹出的对话框中单击“确定”保存标注信息。
-
Tensorboard的使用 - AI开发平台ModelArts
相关操作 关闭TensorBoard方式如下: 方式1:单击下图所示的,进入TensorBoard实例管理界面,该界面记录了所有启动的TensorBoard实例,单击对应实例后面的SHUT DOWN即可停止该实例。
-
准备镜像 - AI开发平台ModelArts
图5 成功上传镜像 Step8 注册镜像 镜像上传至SWR成功后,在ModelArts控制台的“镜像管理”页面中点击“注册镜像”。
-
使用ModelArts的exporter功能在Prometheus查看监控数据 - AI开发平台ModelArts
该YAML用于管理Prometheus的配置,部署Prometheus时通过文件系统挂载的方式,容器可以使用这些配置。
-
数据校验 - AI开发平台ModelArts
选择“数据集”,请从下拉框中选择ModelArts中管理的数据集及其版本。要求数据集类型与您在本任务中选择的场景类别一致。 选择“OBS目录”,存放结构又分两种情况,“仅包含图片”或“包含图片和标注信息”。
-
TensorBoard可视化作业 - AI开发平台ModelArts
相关操作 关闭TensorBoard方式如下: 方式1:单击下图所示的,进入TensorBoard实例管理界面,该界面记录了所有启动的TensorBoard实例,单击对应实例后面的SHUT DOWN即可停止该实例。
-
多输入支持数据选择 - AI开发平台ModelArts
conditions=[condition_equal], if_then_steps=["training_job_1"], else_then_steps=["training_job_2"], ) # 构建一个OutputStorage对象,对训练输出目录做统一管理
-
MindInsight可视化作业 - AI开发平台ModelArts
mindinsight stop --port 8080 方式2:单击下方按钮进入MindInsight实例管理界面,该界面记录了所有启动的MindInsight实例,单击对应实例后面的SHUT DOWN即可停止该实例。
-
JupyterLab简介及常用操作 - AI开发平台ModelArts
登录ModelArts管理控制台,在左侧菜单栏中选择“开发环境 > Notebook”,进入Notebook页面。 选择状态为“运行中”的Notebook实例,单击操作列的“打开”,访问JupyterLab。