华为云用户手册

请求 请求样例 POST https://endpoint/softcomai/datalake/v1.0/download/obs{"datasetIds": ["6173066337018461152"],"targetPath": "s3a://obs-public-data/050889c2a300d2761f4dc014173f2d6b/aitrainalpha_wulan3_test1__0123456789/Dataset/","isSignAgreement": true} 参数说明 参数名 是否必选 参数类型 备注 datasetIds 是 List 需要下载的数据集列表。 targetPath 是 String 下载的OBS路径。 isSignAgreement 是 boolean 是否签署下载协议。

请求 请求样例 POST https://endpoint/softcomai/datalake/v1.0/download/local/permission[{"datasetId": "6250524987736810235","userId": "50531697b4c047888a33ce214da4d11f","authType": "tenant","tenantId": "50531697b4c047888a33ce214da4d11f","expireDate": "2022-12-18 23:59:59"}] 参数说明 参数名 是否必选 参数类型 备注 datasetId 是 String 授权的数据集ID。 userId 是 String 需要被授权的用户ID。 authType 是 String 授权类型。 tenantId 是 String 需要被授权的租户ID。 expireDate 是 String 授权到期时间。

响应 响应样例 { "success": true, "returnData": { "1012603386496666965": { "templateCount": "16", "queryCount": "342", "createProgressCount": "8" } }} 要素说明 参数名 参数类型 备注 success String 请求是否成功。 returnData JSON 返回体。 templateCount String 模板数。 queryCount String 查询次数。 createProgressCount String 使用次数。

响应 响应样例 {"success": true,"returnData": [{"changeModelType" : "ENTITY","changeObjId" : "12222222","changeObjName" : "Miide","changeTime" : "2019-04-10","changeType" : "DELETE","isSecretChange" : false}, {"changeModelType" : "ENTITY","changeObjId" : "12254222","changeObjName" : "Miide","changeTime" : "2019-04-10","changeType" : "DELETE","isSecretChange" : false}]} 要素说明 参数名 参数类型 备注 success String 请求是否成功。 returnData JSON 返回体。 changeObjId String 变化的主体的ID。 changeObjName String 变化的主体的名称。 ChangTime String 主体变化的时间。 changeType String 主体变化的类型，取值包括：DELETE、UPDATE。 isSecretChange String 是否为密级发生变更。

响应 响应样例 {"success": true,"returnData": [{"datasetId": "5879441991835444873","businessName": "test_wy","secretLevel": "4","datasetName": "test_wy"},{"datasetId": "8885619168435900153","businessName": "test_hive","secretLevel": "3","datasetName": "test_hive_dws"},{"datasetId": "4979583540288254651","businessName": "xxxType","secretLevel": "3","datasetName": "xxxType"},{"datasetId": "6134242795425624094","businessName": "test_awx","secretLevel": "3","datasetName": "test_awx"},{"datasetId": "5746641205713800404","businessName": "test_dws","secretLevel": "5","datasetName": "test_dws"},{"datasetId": "3248923352830420658","businessName": "test_hive","secretLevel": "1","datasetName": "test_hive"},{"datasetId": "7223435362916195960","businessName": "Typex","secretLevel": "1","datasetName": "Typex"},{"datasetId": "369351693437448313","businessName": "typelimitxxx","secretLevel": "3","datasetName": "typelimitxxx"}]} 要素说明 参数名 参数类型 备注 success String 请求是否成功。 returnData Json 返回统计结果。 datasetId String 数据集ID。 businessName String 数据集业务名称。 secretLevel int 数据集的密级。 datasetName String 数据集的名称。

URI URI格式 GET /softcomai/datalake/dataplan/v1.0/tasks/getgorvnobs?progressId={progressId}&taskId={taskId}&taskType={taskType} 参数说明 参数名 是否必选 参数类型 备注 progressId 是 String 项目ID。 taskId 是 String 任务ID。 taskType 否 String 任务类型。

请求 请求样例 GET https://ipaddr:port/softcomai/datalake/dataplan/v1.0/tasks/getgorvnobs?progressId=P_20200612141932_2051918096&taskId=1937249134213126111 参数说明 参数名 是否必选 参数类型 备注 progressId 是 String 项目ID。 taskId 是 String 任务ID。

请求 请求样例 POST https://ipaddr:port/softcomai/datalake/dataplan/v1.0/debug{ "name":"ddddddddddddd", "description":"comments", "tag":"tag", "tasks":[ { "id":"3972597175092603021", "pId":0, "variables":[ ], "paramList":[ { "id":"2554957019143428782", "source":"0", "paramName":"Content-Type", "paramValue":"application/json", "appendType":"HEADERS", "userId":"05019f6f81000ff41fdfc00bcb9301c4", "tenantId":"05017923f58026b70f94c00b98ff0660", "createTime":"2019-10-30 17:56:42", "updateTime":"2019-10-30 17:56:42" } ] } ], "driveStrategy":"manual"} 参数说明 参数名 是否必选 参数类型 备注 name 是 String 项目名称。 description 是 String 描述。 tasks 是 JSON LIST 任务列表。 id 是 String 任务ID。 pId 是 String 父任务ID。 id 是 String 任务ID。 pId 是 String 父任务ID。 tasks 是 JSON LIST 子任务列表。 paramList 是 List 参数列表。 id 是 String 参数ID。 source 是 String 来源ID。 paramName 是 String 参数名称。 paramType 是 String 参数类型。 paramValue 是 String 参数值。 userId 是 String 所属用户ID。 tenantId 是 String 租户ID。 createTime 是 String 创建时间。 updateTime 是 String 修改时间。 variables 是 JSON 变量列表。 showName 是 String 变量显示中文名。 showNameEn 是 String 变量显示英文名。 varName 是 String 参数名称。 varValue 是 String 参数值。 remark 是 String 参数备注。 defaultVisible 是 String 是否基础变量。 userId 是 String 所属用户ID。 tenantId 是 String 租户ID。 taskId 是 String 所属任务。

策略示例1 在Chrome浏览器中打开https://www.huaweicloud.com/。 单击界面右上角的“登录”。 输入账号名和密码，单击“登录”。 在华为云首页，单击右上角的“控制台”。 在控制台页面，单击右上角的账号名，选择“ 统一身份认证 ”。 在统一身份认证服务左侧导航树中，单击“用户组”。 在“用户组”界面上右上角，单击“创建用户组”。 在“创建用户组”界面上，配置用户组的相关参数，单击“确定”，如图1所示。 图1 配置创建用户组的参数 单击Data Operation Group对应“操作”列的下“权限配置”。 在“权限管理”页签中，单击列表左上方的“配置权限”，如图2所示。 图2 配置权限 选择授权范围：目前环境是基于华北-北京一、华北-北京四部署的，在“在以下作用范围”下选择“区域级项目”，在下拉框中选择“华北-北京一”或“华北-北京四”。 全局服务：服务部署时不区分物理区域，为全局级服务，在全局区域中授权。包括 对象存储服务 （OBS）、内容分发网络（CDN）、标签管理服务（TMS）等。 区域级项目：服务部署时通过物理区域划分，为项目级服务，授权后只在授权区域生效，如果需要所有区域都生效，则所有区域都需要进行授权操作。 选择用户组的权限：在“拥有以下权限”下，搜索并勾选需要授予的角色名称，如图3所示。 图3 选择用户组对应的角色名称 单击已勾选的权限名称左侧的，查看权限的依赖关系。 由于华为云各服务之间存在业务交互关系，个别服务的角色依赖其他服务的角色实现功能。因此给用户组授予角色时，对于有依赖的角色则需要授予依赖的角色才会生效。 如果角色内容中存在“Depends”字段，表示该角色存在依赖关系，需要同时勾选依赖的角色。 如果角色内容中不存在“Depends”字段，表示该角色不存在依赖关系，不需要勾选其他角色。 单击“确定”，完成用户组授权。 加入这个用户组的用户具有采集与入湖、数据处理、设置数据权限和数据发布的权限。 按7~14，创建一个“Data Owner Group”的群组，将“Data Owner”的权限添加到这个用户组下，加入这个用户组的用户具有审批的权限。

策略示例2 在Chrome浏览器中打开https://www.huaweicloud.com/。 单击界面右上角的“登录”。 输入账号名和密码，单击“登录”。 在华为云首页，单击右上角的“控制台”。 在控制台页面，单击右上角的账号名，选择“统一身份认证”。 在统一身份认证服务左侧导航树中，单击“用户组”。 在“用户组”界面上右上角，单击“创建用户组”。 在“创建用户组”界面上，配置用户组的相关参数，单击“确定”，如图4所示。 图4 配置创建用户组的参数 单击Data Processing Group对应“操作”列的下“权限配置”。 在“权限管理”页签中，单击列表左上方的“配置权限”，如图5所示。 图5 配置权限 选择授权范围：目前环境是基于华北-北京一、华北-北京四部署的，在“在以下作用范围”下选择“区域级项目”，在下拉框中选择“华北-北京一”或“华北-北京四”。 全局服务：服务部署时不区分物理区域，为全局级服务，在全局区域中授权。包括对象存储服务（OBS）、内容分发网络（CDN）、标签管理服务（TMS）等。 区域级项目：服务部署时通过物理区域划分，为项目级服务，授权后只在授权区域生效，如果需要所有区域都生效，则所有区域都需要进行授权操作。 选择用户组的权限：在“拥有以下权限”下，搜索并勾选需要授予的角色名称，如图6所示。 图6 选择用户组对应的角色名称 单击已勾选的权限名称左侧的，查看权限的依赖关系。 由于华为云各服务之间存在业务交互关系，个别服务的角色依赖其他服务的角色实现功能。因此给用户组授予角色时，对于有依赖的角色则需要授予依赖的角色才会生效。 如果角色内容中存在“Depends”字段，表示该角色存在依赖关系，需要同时勾选依赖的角色。 如果角色内容中不存在“Depends”字段，表示该角色不存在依赖关系，不需要勾选其他角色。 单击“确定”，完成用户组授权。 加入这个用户组的用户具有采集与入湖、数据处理、设置数据权限和审批的权限。 按7~14，创建一个“Data Operation Engineer Group”的群组，将“Data Operation Engineer”的权限添加到这个用户组下，加入这个用户组的用户具有发布数据集的权限。

请求 请求样例 GET https://ipaddr:port/dataset/softcomai/datalake/north/v1.0/statics/userEnhance?starttime=20190101000000&endtime=20190701000000 参数说明 参数名 是否必选 参数类型 备注 starttime 是 String 统计周期的开始时间。 endtime 是 String 统计周期的结束时间。

请求 请求样例 POST https://ipaddr:port/softcomai/datalake/dataplan/v1.0/debug/drafts{"name":"测试项目草稿4","draftContent":{"name":"测试草稿4","description":"","tag":"","tasks":[{"id":"9132916638526341305","pId":0,"variables":[{"showName":"businessArea","showNameEn":"businessArea","varName":"businessArea","varValue":"时空领域","defaultVisible":"true","encrypt":"false"},{"showName":"dataType","showNameEn":"dataType","varName":"dataType","varValue":"性能数据","defaultVisible":"true","encrypt":"false"}],"paramList":[],"taskName":"手工采集_采集","taskType":"COLLECTION_BUILTIN","builtInTaskType":"COLLECTION_CLOUD_MANUAL","isKeyTask":"true","timeout":"60","gid":"T_20200518113830_1589773110260","preTaskGid":"","isRoot":true,"childGid":"T_20200518113843_1589773123958"},{"id":"9168462783146011110","pId":0,"variables":[],"paramList":[{"id":"110853876993622767","source":"0","paramName":"string","paramType":"GOVERN_BUILTIN","paramValue":"-env alpha -dataRightAddr \"#{dataRightAddr}\" -preObsModelPath \"${obsModelPath}\" -preEntities \"${entityName}\" -preEntityBusinessNames \"${entityBusinessName}\" -preEntityDirs \"${entityAbsoluteDirectory}\" -section \"queryModelDetail\" -domainId #{ultimateTenantId} -domainName #{ultimateTenantName} -projectId #{ultimateProjectId} -userId #{ultimateUserId} -managementToken ${getManageToken}","appendType":"STRING","userId":"PUBLIC","tenantId":"PUBLIC","createTime":"2020-05-16 16:13:57","newCreate":"false"},{"id":"855281492693696137","source":"0","paramName":"dataModelPackage","paramType":"GOVERN_BUILTIN","paramValue":"dr-1d7714fdf8404a01bae9610512162a52","appendType":"JOB_ID","userId":"PUBLIC","tenantId":"PUBLIC","createTime":"2020-05-16 16:13:57","newCreate":"false"}],"taskName":"数据建模_治理","taskType":"GOVERN_BUILTIN","builtInTaskType":"GOVERN_MODEL","isKeyTask":"true","timeout":60,"gid":"T_20200518113843_1589773123958","preTaskGid":"","isRoot":false,"childGid":""}],"driveStrategy":"localCollectDrive"}} 参数说明 参数名 是否必选 参数类型 备注 name 是 String 草稿名称。 draftContent 是 JSON 草稿内容。

响应 响应样例 { "success": true, "returnData": [ { "loginTime": "20190612", "userId": "04f6fe7b5880d3291fa4c0135bde0e4c", "userName": "test", "tenantId": "b75b2a8b76be47b884d56dc17cfcd8c9", "tenantName": "SoftComAI_wl_0123456789", "loginCount": "9" }, { "loginTime": "20190612", "userId": "052f3aa77880d5911f1cc01389ce7151", "userName": "test", "tenantId": "b75b2a8b76be47b884d56dc17cfcd8c9", "tenantName": "SoftComAI_wl_0123456789", "loginCount": "1" } ]} 要素说明 参数名 参数类型 备注 success String 请求是否成功。 returnData Json 返回统计结果。 loginTime String 登录时间。 userId String 用户ID。 userName String 用户名称。 tenantId String 租户ID。 tenantName String 租户名称。 loginCount Int 登录次数。

请求 请求样例 POST https://endpoint/softcomai/datalake/v1.0/notify{"changeType" : "UPDATE","notifySource" : "DR","changeModelType" : "ENTITY","notifyOrignalModels" : {"entityId" : "4028841c6999d0e2016999f207770048","businessName" : "CopyOf_hive_test001","entityName" : "CopyOf_hive_test001","layerId" : "4028841c699f47030169bde1f3110254","tenantId" : "SoftcomAI_Integration_Test2","dclId" : "4","modify_oper" : "SoftcomAI_Integration_Test2___0123456789"}} 参数说明 参数名 是否必选 参数类型 备注 changeType 是 String 取值包括：UPDATE、ADD、DELETE。 notifySource 否 String 通知的来源。 changeModelType 是 String 取值包括：ENTITY、LAYER、ATTR。 notifyOrignalModels 是 String 详细的变更内容。 entityId 是 String 实体ID。 businessName 是 String 业务名称。 entityName 否 String 实体名称。 layerId 是 String 层次ID。 dclId 是 String 秘密级别。 modify_oper 否 String 修改人。

响应 响应样例 {"success" : true,"returnData" : [{"userId" : "0f1b4ab35a67483b99678fbeb2546f42","userName" : "softcom_0123456789","tenantId" : "97d2b7d3f1334608b88a6218b83e1aa7","tenantName" : "softcom_0123456789","w3Id" : ""}, {"userId" : "aa9455bcafe949219d6c8cf8fa9801e6","userName" : "SoftComAI_Train_0123456789","tenantId" : "04e123107fe34fb88f6a4b770437a662","tenantName" : "SoftComAI_Train_0123456789","w3Id" : ""}]} 要素说明 参数名 参数类型 备注 success String 请求是否成功。 returnData Json 返回结果。 userId String 用户ID。 userName String 用户名。 tenantId String 租户ID。 tenantName String 租户名。 w3Id String W3账户ID。

响应 响应样例 {"success": true,"errorMsg": null,"errorCode": null,"returnData": "a2cab4690c41416eae798f8d90abe277"} 要素说明 参数名 参数类型 备注 success boolean 请求是否成功。 errorMsg String 错误描述。 errorCode String 错误码。 returnData Object 返回值。

请求 请求样例 请求租户下面的所有采集机上的所有探针创建探针实例，创建采集任务类型：appmarket。 POST https://ip:port/softcomai/datalake/collection/v1.0/task/create{"taskName": "name","ossId":"oss","collectTaskType":"appmarket"} 创建单个采集任务，创建任务类型：dataplan。 POST https://ip:port/softcomai/datalake/collection/v1.0/task/create{"agreementType": "sftp","collectTaskType": "dataplan","taskId": "","taskName": "12121","collectorId": "Collector-883c0575","probePackageName": "Probe_NAIE_SFTP_Common_V200R020C50SPC401.zip","operate": "operate","carrierSubnetsubNet": "","country": "China","domain": "IT","netName": "U2000","netWorkInfo": "121","collectObjectType": "LIC","securityLevel": "Secret","authScope": "HWTP","validPeriod": 1636041600000,"progressid": "P_20200522171603_520903745","protocolBody": {"acquisitionCycle": "","acquisitionUnit": "day","delayTime": 0,"delayUnit": "min","fileFilter": "","host": "xx.xx.xx.xx","port": "498","userName": "fd","password": "dkjjffd","historyFrom": 1572537620000,"historyTo": 1604125927000,"ifInclude": "true","isSupportCompress": "false","extensionPathName1": "","extensionPathName2": "","extensionPathName3": "","extensionPathName4": "","extensionPathValue1": "","extensionPathValue2": "","extensionPathValue3": "","extensionPathValue4": "","path": "/tmp/test","strategy": "period","scanPeriod": "60"}} 创建单个采集任务，创建任务类型：logService。 POST https://ip:port/softcomai/datalake/collection/v1.0/task/create{"collectTaskType":"logService","progressid":"P_20200522171603_520903745"} 参数说明 参数名 是否必选 参数类型 备注 taskName 是 String 任务名称。 collectTaskType 是 String 创建采集任务方式（appmarket/dataplan/ consoleServer/logService）。 ossId 否 String 网管UUID。 collectorId 是 String 采集机ID。 progressId 否 String 流程ID。 probePackageName 是 String 探针包名称。 operate 否 String 运营商。 country 否 String 国家。 domain 否 String 领域。 netName 否 String 网管名称。 netWorkInfo 否 String 网元类型。 collectObjectType 否 String 采集对象类型。 securityLevel 否 String 密级。 authScope 否 String 授权范围。 agreementType 否 String 协议类型（SFTP/FTPS）。 validPeriod 否 Long 数据有效期。 protocolBody.scanPeriod 否 String 采集周期。 protocolBody.host 是 String 主机IP。 protocolBody.port 是 String 端口。 protocolBody.userName 是 String 用户。 protocolBody.password 是 String 密码。 protocolBody.path 否 String 采集路径。 protocolBody.strategy 否 String 采集策略。 protocolBody.acquisitionUnit 否 String 采集单元。 protocolBody.delayUnit 否 String 滞后时间单位。 protocolConsoleBody.protocolList.extensionPathName1 否 String 扩展路径类型1（whiteList，fixedValue，timeType）。 protocolBody.extensionPathValue1 否 String 扩展路径值。 protocolBody.extensionPathName2 否 String 扩展路径类型1（whiteList，fixedValue，timeType）。 protocolBody.extensionPathValue2 否 String 扩展路径值。 protocolBody.extensionPathName3 否 String 扩展路径类型1（whiteList，fixedValue，timeType）。 protocolBody.extensionPathValue3 否 String 扩展路径值。 protocolBody.extensionPathName4 否 String 扩展路径4。 protocolBody.extensionPathValue4 否 String 扩展路径值。 protocolBody.isSupportInc 否 String 是否增量上报。 protocolBody.isSupportFragment 否 String 是否支持分片。 protocolBody.isSupportCompress 否 String 是否支持压缩。 protocolBody.ifInclude 否 String 采集文件是否包含。 protocolBody.sslMode 否 String 是否开启SSL认证。 protocolBody.localHost 否 String 采集机小网IP。 dataSourceId 否 String 数据源ID。 protocolBody.fileFilter 否 String 文件名过滤条件。

响应 响应样例 {"success": true,"returnData": {"commonPrefixs": ["Test/Test1/","Test/data_test/","Test/hdfs_test2/","Test/kpi_data_period_15_hdfs/"]}} 要素说明 参数名 参数类型 备注 returnData JSON 返回结果。 success String 请求是否成功。 commonPrefixs 数组 指定OBS目录下的文件。

请求 请求样例 POST https://ip:port/softcomai/datalake/collection/v1.0/task{"taskName": "sftp协议7","collectTaskType": "consoleServer","collectionMode": "AGENT","collectorId": "Collector-f90e5e07","protocolType": "sftp","protocolCategory": "","note": "我是个备注","tag": "12333","dataInfo": {"mainCategory": "pipe","subCategory": "access","device": "NCE-FAN","dataType": "PM","version": "common"},"strategy": "interval","interval":{"acquisitionUnit":"min","acquisitionCycle":"30"},"cron": {"jobType": 3,"second": 0,"minute": 15,"hour": 14},"protocolList": [{"host": "xx.xx.xx.xx","port": "22","userName": "root","password": "Abc@123","path": "/yy"},{"host": "xx.xx.xx.xx","port": "22","userName": "root","password": "Abc@123","path": "/opt/test"}]} 参数说明 参数名 是否必选 参数类型 备注 taskName 是 String 任务名称。 collectTaskType 是 String 创建采集任务方式（appmarket/dataplan/ consoleServer/logService/netMap）。 tag 否 String ossId（数据准备）。 collectorId 否 String 采集ID。 collectionMode 是 String 采集类型（EIP AGENT VPN）。 protocolType 是 String 协议类型。 protocolCategory 否 String 协议子类型。 note 否 String 备注。 dataType 否(collectTaskType=netMap必选) String 数据类型。 taskId 否 String 任务ID。 strategy 是 String 采集周期。 once：一次性采集。 period：周期性采集。 interval：间隔性采集。 serviceNames 否 String 服务名称。 dataInfo 否 Object 数据信息对象。 dataInfo.mainCategory 是 String 主类别。 dataInfo.subCategory 是 String 子类别。 dataInfo.device 是 String 网管、设备信息。 dataInfo.dataType 是 String 数据类型。 dataInfo.version 否 String 版本。 interval 否（strategy=interval必选） Object 间隔性策略。 interval.acquisitionUnit 否 String 间隔单位。 min：分钟。 hour：小时。 interval.acquisitionCycle 否 String 间隔时长。取值范围：1~10000。 cron 否（strategy=period必选） Object 周期性策略。 cron.jobType 否 int cron作业类型。取值范围：0~6。 cron.second 否 int 秒。取值范围：0~59。 cron.minute 否 int 分钟。取值范围：0~59。 cron.hour 否 int 小时。取值范围：0~23。 protocolList 是 List 协议列表。具体参数说明请参见表1。 表1 protocolList参数说明 参数名 是否必选 参数类型 备注 protocolList.host 否 String 数据源IP。 protocolList.port 否 String 数据源端口，取值范围为：1~65535。 protocolList.userName 否 String 数据源名称。 protocolList.password 否 String 数据源密码。 protocolList.path 否 String 数据源路径。 protocolList.database 否 String 数据库名（数据源为Database使用）。 protocolList.tables 否 String 表名（数据源为Database使用）。 protocolList.protocolVersion 否 String 数据库版本（数据源为Database使用）。 protocolList.dataTable 否 String 硬盘数据表（数据源为硬盘使用）。 protocolList.dataId 否 String 硬盘数据ID（数据源为硬盘使用）。 protocolList.localhost 否 String 采集机IP（数据源为Corba使用）。 protocolList.sslMode 否 String SSL认证（数据源为Corba使用）。 protocolList.kafkaId 否 String kafkaId（数据源为Kafka使用）。 protocolList.brokers 否 String kafka集群地址（数据源为Kafka使用）。 protocolList.principal 否 String kerberos用户（数据源为Kafka使用）。 protocolList.truststorePassword 否 String truststore证书密码（数据源为Kafka使用）。 protocolList.keystorePassword 否 String keystore证书密码（数据源为Kafka使用）。 protocolList.sslMode 否 String SSL认证（数据源为Corba使用）。

响应 响应样例 {"success": true,"returnData": {"sum": 11,"medium": 1,"positive": 9,"bad": 1}} 要素说明 参数名 参数类型 备注 success String 请求是否成功。 returnData Integer 返回体，更新记录的条数。 sum Integer 评论总数。 medium Integer 中评数量。 positive Integer 好评数量。 bad Integer 差评数量。

URI URI格式 GET /softcomai/datalake/v1.0/datasets/querySubjectMetadata?pdDomain={pdDomain}&clsID={clsID}&level={level} 参数说明 参数名 是否必选 参数类型 备注 pdDomain 是 String 产品域，取值包括无线、云核、固定接入、传送、数通、网能、IT。 clsID 否 String 主题类别，取值包括时空、站点、资源、业务、拓扑、供应商、营商、客户、故障、测量、知识库。 level 否 String 主题分层，取值包括时空、物理、逻辑、业务、体验。

响应 响应样例 { "success": true, "returnData": { "subjectModels": [ { "id": "dr-4686d97920bc4e9bb9db9df1186c122b", "name": "showcase模型", "pdDomain": "无线", "clsID": "资源", "level": "逻辑", "fields": [ { "attrId": "dr-6aa8ddb63f9141e58de0ca6ead82fd3a", "attrName": "City", "attrDesc": "城市", "attrType": "AIVCHAR", "dataLen": 50 }, { "attrId": "dr-167838c8d2594294b939e55ec6a002cb", "attrName": "District", "attrDesc": "行政区", "attrType": "AIVCHAR", "dataLen": 50 }, { "attrId": "dr-66f0244ee4d4465586ff51680d495822", "attrName": "Altitude", "attrDesc": "Altitude", "attrType": "AIVCHAR", "dataLen": 50 } ] } ] }} 要素说明 参数名 参数类型 备注 success String 请求是否成功。 returnData JSON 返回值。 subjectModels JSON 主题模型列表。 Id String 主题模型的标识。 Name String 主题模型的名称。 pdDomain String 产品域。 clsID String 主题类别。 level String 主题分层。 fields JSON 主题模型的字段定义。 attrId String 属性ID。 attrName String 属性名称。 attrDesc String 属性描述。 attrType String 属性类型。 dataLen Int 属性长度。

响应 响应样例 { "success": true, "errorMsg": null, "errorCode": null, "returnData": { "progressId": "P_20200518171834_163704264""extends":extendsInfo }} 要素说明 参数名 参数类型 备注 success Boolean 请求是否成功，取值包括true和false。 returnData Json 返回信息。

请求 请求样例 POST https://ipaddr:port/softcomai/datalake/dataplan/v1.0/north/progress/createbytemplateid{ "tagString": "PrcAnnCase", "templateId":"templateId", "isRepeatable": "false", "progressName": "progressname", "progressDesc": "", "driveStrategy": "cloudCollectDrive", "collectInfo": { "taskName": "手工采集_采集", "variables": [ { "varName": "serviceName", "varValue": "logService", "encrypt": "false" } ] }} 参数说明 参数名 是否必选 参数类型 备注 tagString 否 String 标签，多个标签用英文逗号分隔。 templateId 是 String 模板ID。 isRepeatable 是 String 是否允许模板重复实例化，true表示允许。 progressName 是 String 新的项目名称。 progressDesc 否 String 项目描述。 driveStrategy 是 String 驱动策略，取值包括本地采集驱动、远程采集驱动和手工驱动。 collectInfo 否 JSON 本地上传或云地采集的参数。

请求 请求样例 https://ip:port/softcomai/datalake/collection/v1.0/task/progress/id/add{"taskId": "1b12e30e1b3c404fb58ae888817754f0","progressId": "P_20200901155638_1265840513"} 参数说明 参数名 是否必选 参数类型 备注 taskId 是 String 任务ID。 progressId 是 String 流程ID。

响应 响应样例 {"success": true,"returnData": "https://obs-public-data.obs.cn-north-7.ulanqab.huawei.com:443/050889c2a300d27f4dc014173f2d6b/l00411/Dataset/t_trainset_ftt_kpi.csv?AWSAccessKeyId=HeDUoJfOyyF80OG&Expires=161039460&Signature=AQfEJEhhlW1F8hKdzVhhEM%3D"} 要素说明 参数名 参数类型 备注 success String 请求是否成功。 returnData String 返回的临时链接。

请求 请求样例 POST https://127.0.0.1:5555/softcomai/datalake/dataplan/v1.0/north/progress{ "tagString": "Walkthroughs_51527", "isRepeatable": "false", "progressName": "ProgressNameNCEXXXX", "progressDesc": "", "variableList": [ ]} 参数说明 参数 是否必选 类型 说明 tagString 是 String 标签列表。 isRepeatable 是 String 是否重复创建。 progressName 是 String 项目名称。 progressDesc 是 Stirng 描述。 variableList 是 List 变量信息。

响应 响应样例 {"success": true,"returnData": {"obsInfo": [{"bucketName": "bucket-hvnngyjf","obsPath": "0001BigData/Collector-df0ddbed_8c9f9b8daad0410db9170bf890753c29/data/test"}]}} 要素说明 参数名 参数类型 备注 success Boolean 请求是否成功。 returnData Object 返回值。

计费项 数据服务按照用户选择的“存储容量”和“计算规格”计费。计费项包括存储资源（HDFS）、 MRS 计算资源、ModelArts资源和数据集实际价格，如表1所示。 表1 计费项 计费项 计费说明 存储资源（HDFS） 数据服务根据订购时配置的“存储容量”和使用时长计费。 服务订购后，开始计费。不使用请及时退订服务，以免产生不必要的费用。 MRS计算资源 使用数据服务的“数据探索”时，根据订购时配置的“计算规格”和使用时长计费，不使用则不产生费用。 只有显示在“任务仓库”中的任务，当任务处于Running状态时，开始计费。 ModelArts资源 使用数据服务的“数据处理”时，根据订购时配置的“计算规格”和使用时长计费，不使用则不产生费用。 当启动作业，作业任务处于Running状态时，开始计费。请及时停止不需要的作业任务，以免产生不必要的费用。 数据集实际价格 根据数据集实际价格进行单次计费。 当租户下的用户订阅使用收费的数据集时，对该租户进行单次收费。收费后该租户下的其他用户订购使用该数据集，则不再重复收费。

响应 响应样例 {"success": true,"returnData": {"taskId": "1592183909946_0852","taskStatus": 3,"progressRate": 100}} 要素说明 参数名 参数类型 备注 success String 请求是否成功。 returnData JSON 返回值。 taskId String 查询任务的ID。 taskStatus Int 任务的执行状态，取值包括如下： 0：表示成功。 1：表示执行中。 2：表示不存在。 3：表示执行失败。 progressRate Int 任务的执行进度，取值范围是0~100。