-
(可选)工作空间配置 - AI开发平台ModelArts
(可选)工作空间配置 ModelArts支持设置子用户的细粒度权限、不同工作空间之间资源隔离。ModelArts工作空间帮您实现项目资源隔离、多项目分开结算等功能。 如果你开通了企业项目管理服务的权限,可以在创建工作空间的时候绑定企业项目ID,并在企业项目下添加用户组,为不同的用户组设置细粒度权限供组里的用户使用。
-
Notebook提示磁盘空间已满 - AI开发平台ModelArts
放入回收站占用内存,导致磁盘空间不足。 磁盘配额不足。 处理方法 查看虚拟机所使用的存储空间,再查看回收站文件占用内存,根据实际删除回收站里不需要的大文件。 在Notebook实例详情页,查看实例的存储容量。 执行如下命令,排查虚拟机所使用的存储空间,一般接近存储容量,请排查回收站占用内存。
-
调整容器引擎空间大小 - AI开发平台ModelArts
调整容器引擎空间大小 若您需要更大的容器引擎空间,您可以通过以下操作调整容器引擎空间大小。 对于新建的资源,支持在新建时指定容器引擎空间大小。 方式一:支持新建资源池时指定容器引擎空间大小,请参见k8s Cluster资源购买中“规格管理”参数下“高级选项”。 方式二:单击某个资
-
开发环境提示空间不足,如何解决? - AI开发平台ModelArts
开发环境提示空间不足,如何解决? 当提示空间不足时,推荐使用EVS类型的Notebook实例。 参考如何在Notebook中上传下载OBS文件?操作指导,针对原有的Notebook,首先将代码和数据上传至OBS桶中。然后创建一个EVS类型的Notebook,将此OBS中的文件下载
-
数据标注 - AI开发平台ModelArts
数据标注 项目创建完成后,将会自动跳转至新版自动学习页面,并开始运行,当数据标注节点的状态变为“等待操作”时,需要手动进行确认数据集中的数据标注情况,也可以对数据集中的数据进行标签的修改,数据的增加或删减。 图1 数据标注节点状态 双击“数据标注”节点,单击实例详情按钮,打开数据标注页面。
-
数据管理(旧版) - AI开发平台ModelArts
数据管理(旧版) 查询数据集列表 创建数据集 查询数据集详情 更新数据集 删除数据集 查询数据集的统计信息 查询数据集监控数据 查询数据集的版本列表 创建数据集标注版本 查询数据集版本详情 删除数据集标注版本 查询样本列表 批量添加样本 批量删除样本 查询单个样本信息 获取样本搜索条件
-
开发环境提示空间不足,如何解决? - AI开发平台ModelArts
开发环境提示空间不足,如何解决? 当提示空间不足时,推荐使用EVS类型的Notebook实例。 参考如何在Notebook中上传下载OBS文件?操作指导,针对原有的Notebook,首先将代码和数据上传至OBS桶中。然后创建一个EVS类型的Notebook,将此OBS中的文件下载
-
查看参与标注的作业 - AI开发平台ModelArts
查看参与标注的作业 在ModelArts数据标注页面可查看用户参与的标注作业。 前提条件 创建标注作业时,启用了团队标注。 操作步骤 登录ModelArts管理控制台。在左侧菜单栏选择“数据管理>数据标注”,进入数据标注详情页面。 在数据标注详情页选择“我参与的”,即可展示所有参
-
如何获取本机外网IP? - AI开发平台ModelArts
如何获取本机外网IP? 本机的外网IP地址可以在主流搜索引擎中搜索“IP地址查询”获取。 图1 查询外网IP地址 父主题: 环境配置相关
-
标注数据 - AI开发平台ModelArts
标注数据 图像分类 物体检测 图像分割 文本分类 命名实体 文本三元组 声音分类 语音内容 语音分割 视频标注 父主题: 数据管理(旧版即将下线)
-
自动分组 - AI开发平台ModelArts
组算法,您可以针对您选中的数据,执行自动分组,提升您的数据标注效率。 自动分组可以理解为数据标注的预处理,先使用聚类算法对未标注图片进行聚类,再根据聚类结果进行处理,可以分组打标或者清洗图片。 例如,用户通过搜索引擎搜索XX,将相关图片下载并上传到数据集,然后再使用自动分组,可以
-
创建数据集 - AI开发平台ModelArts
创建数据集 在ModelArts进行数据准备,首先需要先创建一个数据集,后续的操作如数据导入、数据分析、数据标注等,都是基于数据集来进行的。 数据集简介 创建数据集 修改数据集
-
使用pip install时出现“没有空间”的错误 - AI开发平台ModelArts
使用pip install时出现“没有空间”的错误 问题现象 在Notebook实例中,使用pip install时,出现“No Space left...”的错误。 解决办法 建议使用pip install --no-cache ** 命令安装,而不是使用pip install
-
使用pip install时出现“没有空间”的错误 - AI开发平台ModelArts
使用pip install时出现“没有空间”的错误 问题现象 在Notebook实例中,使用pip install时,出现“No Space left...”的错误。 解决办法 建议使用pip install --no-cache ** 命令安装,而不是使用pip install
-
数据增强(图像生成) - AI开发平台ModelArts
do_validation True 是否做数据校验,默认为True,表示数据生成前需要做数据校验,否则只做数据生成。 数据输入 算子输入分为两种,“数据集”或“OBS目录”。 选择“数据集”,请从下拉框中选择ModelArts中管理的数据集及其版本。要求数据集类型与您在本任务中选择的场景类别一致。
-
创建数据集 - AI开发平台ModelArts
模型名称。 数据集统计信息可视化 数据集API支持自动统计数据集信息,比如目标、尺寸等信息,帮助用户更好的理解数据集,同时还可以动态查看每一个batch经过pipeline之后的输入图像,确保数据增强的正确性。 db.plot_dataset_stats() 可以绘制数据集的统计信
-
模型训练 - AI开发平台ModelArts
现高效的数据集本地数据缓存技术,通过训练调优算法,如混合并行,梯度压缩、卷积加速等技术,实现分布式训练系统软硬件端到端的高效协同优化,实现多机多卡分布式环境下训练加速。ModelArts在千级别资源规格多机多卡分布式环境下,典型模型ResNet50 在ImageNet数据集上实现加速比>0
-
Huggingface缓存目录空间不足,出现OSError: [Errno 122] Disk quota exceeded: - AI开发平台ModelArts
Huggingface缓存目录空间不足,出现OSError: [Errno 122] Disk quota exceeded: 问题现象 报错提示“OSError: [Errno 122] Disk quota exceeded”。 原因分析 默认情况下,下载数据集缓存目录为“~/.ca
-
容器中挂载存储 - AI开发平台ModelArts
存储大小根据云硬盘的大小而定。 静态挂载 动态挂载 数据盘空间分配详细说明请参见文档数据盘空间分配说明。 常见问题 当用户发现可访问的存储空间比较小,如果没有挂载任何外部存储,则可用存储空间根据dockerBaseSize的配置来决定。 建议:挂载外部存储空间解决存储空间受限问题。 父主题: 存储
-
数据集如何切分 - AI开发平台ModelArts
数据集如何切分 在发布数据集时,仅“图像分类”、“物体检测”、“文本分类”和“声音分类”类型数据集支持进行数据切分功能。 一般默认不启用该功能。启用后,需设置对应的训练验证比例。 输入“训练集比例”,数值只能是0~1区间内的数。设置好“训练集比例”后,“验证集比例”自动填充。“训练集比例”加“验证集比例”等于1。