检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
该API属于eiHealth服务,描述: 查询数据接口URL: "/v1/{project_id}/eihealth-projects/{eihealth_project_id}/databases/{database_id}/data"
该API属于ImageSearch服务,描述: 检查指定服务实例中的对应数据,支持指定ID检查和条件检查。接口URL: "/v2/{project_id}/mms/{service_name}/data/check"
该API属于DLI服务,描述: 该API用于将数据导出到文件。支持数据从DLI表中导出到文件。接口URL: "/v1.0/{project_id}/jobs/export-table"
该API属于DLI服务,描述: 该API用于将数据从文件导入DLI或OBS表,目前仅支持将OBS上的数据导入DLI或OBS中。接口URL: "/v1.0/{project_id}/jobs/import-table"
该API属于DLI服务,描述: 该API用于将数据从文件导入DLI或OBS表,目前仅支持将OBS上的数据导入DLI或OBS中。接口URL: "/v1.0/{project_id}/jobs/import-table"
发布数据集 企业A和大数据厂商B分别将自己的csv数据文件上传到自己的计算节点上,通过“数据管理”模块创建各自的数据集。 企业A的数据集如下: 大数据厂商B的数据集如下: 创建数据集后单击“发布”按钮即可将数据的元数据信息发布到tics联盟侧,供其他合作方参考。
发布数据集 企业A和大数据厂商B分别将自己的csv数据文件上传到自己的计算节点上,通过“数据管理”模块创建各自的数据集。 企业A的数据集如下: 大数据厂商B的数据集如下: 创建数据集后单击“发布”按钮即可将数据的元数据信息发布到tics联盟侧,供其他合作方参考
数据源配置
使用DLI将CSV数据转换为Parquet数据
发布数据集 企业A将自己的需要预测的csv数据文件上传到自己的计算节点上,通过“数据管理”模块创建用于预测的数据集。 企业A预测数据集如下: 大数据厂商B仍使用训练时的提供的全量数据作为预测数据集,没有发布新的数据集。
历史数据到源数据表,使用数据集成将历史数据从OBS导入到SDI贴源层的原始数据表。 历史数据清洗,使用数据开发的MRS Hive SQL脚本将源数据表清洗之后导入DWI层的标准出行数据表。 将基础数据插入维度表中。 将DWI层的标准出行数据导入DWR层的事实表中。
历史数据到源数据表,使用数据集成将历史数据从OBS导入到SDI贴源层的原始数据表。 历史数据清洗,使用数据开发的MRS Hive SQL脚本将源数据表清洗之后导入DWI层的标准出行数据表。 将基础数据插入维度表中。 将DWI层的标准出行数据导入DWR层的事实表中。
发布数据集 企业B分别自己的csv数据文件上传到自己的计算节点上,通过“数据管理”模块创建各自的数据集,并点击“发布”。 企业B的数据集如下: 创建数据集后点击“发布”按钮即可将数据的元数据信息发布到tics联盟侧,供其他合作方参考。
租户数据迁移 当租户数据量增多,或者资源需求提升,目前资源环境不适合租户使用时,需要将租户数据从物理数据库中迁移。 行隔离-数据分片迁移 schema隔离-schema迁移 数据库隔离-整体数据迁移
发布数据集 企业A和企业B分别将自己的csv数据文件上传到自己的计算节点上,通过“数据管理”模块创建各自的数据集,并单击“发布”。 以企业A为例,数据集信息如下: 隐私求交场景需要将求交的字段设置为“非敏感”的唯一标识。
创建数据源 在IoTA Console页面左侧导航栏,选择“数据源”,在右侧选择“IoTDA实时数据源”,点击下方“添加数据源”按钮,如下图所示 在弹出对话框中输入"数据源名称", 选择“共享实例”,同时勾选“灯”产品类型,点击确定。 添加数据源后如下图所示:
按条件更新数据 功能介绍 按条件更新数据,该接口为同步接口。 在此之前需要先创建对象以及待更新的数据记录。 URI PUT AstroZero域名/
加载示例数据 在默认数据库gaussdb中加载示例数据。您将上传的示例数据位于OBS上。 请确保您的SQL客户端已经连接至集群,然后再操作。 TPC-DS的示例数据目前仅在华北-北京一区域使用。
ERP数据下发 完成IT数采配置后,IoT边缘平台将采集到的ERP数据下发到MES子系统,您可以在MES子系统平台查看数据同步结果。 数据源下发 进入IoT边缘控制台,选择左侧导航栏“IoT边缘 > 边缘节点”进入页面,选择
创建数据管道 在IoTA Console页面左侧导航栏,选择“数据管道”,在右侧点击“创建数据管道”按钮,如下图所示 在弹出对话框中输入"作业名称",选择数据源为“IoTDA类型的数据源”,比如"test-source" 默认创建的好的管道作业如下图所示: