-
使用预置AI算法部署在线服务报错gunicorn:error:unrecorgized arguments - AI开发平台ModelArts
图1 在线服务报错 原因分析 根据报错日志分析,模型目录下存在多余文件“/home/mind/model/v0432/cdn_short.pt”。
-
文件传输(推荐) - AI开发平台ModelArts
文件传输(推荐) 该接口支持上传本地文件和文件夹至OBS,支持下载OBS文件和文件夹至本地,推荐使用该接口。 示例代码 在ModelArts Notebook平台,Session鉴权无需输入鉴权参数。其它平台的Session鉴权请参见Session鉴权。
-
JupyterLab目录的文件、Terminal的文件和OBS的文件之间的关系 - AI开发平台ModelArts
JupyterLab目录的文件、Terminal的文件和OBS的文件之间的关系 JupyterLab目录的文件与Terminal中work目录下的文件相同。即用户在Notebook中新建的,或者是从OBS目录中同步的文件。
-
动态挂载OBS并行文件系统 - AI开发平台ModelArts
动态挂载OBS并行文件系统 什么是动态挂载OBS并行文件系统 并行文件系统(Parallel File System)是对象存储服务(Object Storage Service,OBS)提供的一种经过优化的高性能文件系统,详细介绍可以参见并行文件系统。
-
读取文件报错,如何正确读取文件 - AI开发平台ModelArts
读取文件报错,如何正确读取文件 问题现象 创建训练作业如何读取“json”和“npy”文件。 训练作业如何使用cv2库读取文件。 如何在MXNet环境下使用torch包。
-
如何导入大文件到Notebook中? - AI开发平台ModelArts
如何导入大文件到Notebook中? 大文件(大于100MB的文件) 针对大文件,建议使用OBS服务上传文件。使用OBS客户端,将本地文件上传至OBS桶中,然后使用ModelArts SDK从OBS下载文件至Notebook本地。 使用OBS客户端上传文件的操作指导:上传文件。
-
如何上传本地文件至Notebook? - AI开发平台ModelArts
如何上传本地文件至Notebook? Notebook中JupyterLab的文件上传方式请参见上传本地文件至JupyterLab。 父主题: 文件上传下载
-
如何将git clone的py文件变为ipynb文件 - AI开发平台ModelArts
如何将git clone的py文件变为ipynb文件 在ipynb文件中,执行%load XXX.py命令,即可将py文件内容加载到ipynb中。以“test.py”文件为例,下图展示了如何将“test.py”的文件内容加载到ipynb文件中。
-
MoXing如何访问文件夹并使用get - AI开发平台ModelArts
MoXing如何访问文件夹并使用get_size读取文件夹大小? 问题现象 使用MoXing无法访问文件夹。 使用MoXing的“get_size”读取文件夹大小,显示为0。 原因分析 使用MoXing访问文件夹,需添加参数:“recursive=True”,默认为False。
-
如何下载Notebook中的文件到本地? - AI开发平台ModelArts
如何下载Notebook中的文件到本地? Notebook中JupyterLab下载文件到本地的方式,请参见从JupyterLab下载文件至本地。 父主题: 文件上传下载
-
在Notebook中上传文件失败,如何解决? - AI开发平台ModelArts
在Notebook中上传文件失败,如何解决? 问题现象 文件上传很快,但是上传失败。 上传文件到Notebook时,界面一直在转圈;使用Moxing命令上传,报错;上传OBS文件时,打开OBS浏览器也不显示桶,一直在“获取数据中”。
-
如何在Notebook中上传下载OBS文件? - AI开发平台ModelArts
图1 Notebook中上传下载OBS文件 使用OBS客户端上传文件的操作指导:上传文件 方法一:在Notebook中通过Moxing上传下载OBS文件 MoXing是ModelArts自研的分布式训练加速框架,构建于开源的深度学习引擎TensorFlow、PyTorch等之上,使用
-
读CSV文件 - AI开发平台ModelArts
读CSV文件 概述 读CSV文件支持从LOCAL、OBS、HDFS读取CSV类型的文件数据。
-
解析Manifest文件 - AI开发平台ModelArts
解析Manifest文件 解析Manifest文件,支持本地和OBS。如果是OBS,需要Session信息。
-
上传本地小文件(100MB以内)至JupyterLab - AI开发平台ModelArts
上传本地小文件(100MB以内)至JupyterLab 对于大小不超过100MB的文件直接上传,并展示文件大小、上传进度及速度等详细信息。 图1 上传100MB以下小文件 文件上传完成后给出提示。 图2 上传成功 父主题: 上传本地文件至JupyterLab
-
上传本地超大文件(5GB以上)至JupyterLab - AI开发平台ModelArts
图1 不支持直接上传大小超过5GB的文件 5GB以上的文件需要先从本地上传到OBS中,再在Notebook中调用ModelArts的Moxing接口或者SDK接口读写OBS中的文件。 图2 在Notebook中上传下载大文件 具体操作如下: 从本地上传文件至OBS。
-
ModelArts SDK下载文件目标路径设置为文件名,部署服务时报错 - AI开发平台ModelArts
ModelArts SDK下载文件目标路径设置为文件名,部署服务时报错 问题现象 ModelArts SDK在OBS下载文件时,目标路径设置为文件名,在本地IDE运行不报错,部署为在线服务时报错。
-
上传本地大文件(100MB~5GB)至JupyterLab - AI开发平台ModelArts
图5 使用默认路径上传文件 图6 设置本地文件OBS中转路径 完成OBS中转路径设置后,开始上传文件。 图7 上传文件 解压缩文件包 将文件以压缩包形式上传至Notebook JupyterLab后, 可在Terminal中解压缩文件包。
-
模型配置文件编写说明 - AI开发平台ModelArts
模型配置文件编写说明 模型开发者发布模型时需要编写配置文件config.json。模型配置文件描述模型用途、模型计算框架、模型精度、推理代码依赖包以及模型对外API接口。 配置文件格式说明 配置文件为JSON格式,参数说明如表1所示。
-
上传远端文件至JupyterLab - AI开发平台ModelArts
图3 输入有效的远端文件URL 图4 远端文件上传成功 异常处理 远端文件上传失败。可能是网络原因。请先在浏览器中输入该远端文件的URL地址,测试该文件是否能下载。 图5 远端文件上传失败 父主题: 上传文件至JupyterLab