检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
API数据源 算子简介 名称: API接入数据源 功能说明: 通过API进行数据上报到pipeline的数据源。 约束:下游不允许对接数据源。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明: 算子名称,对算子进行个性化的命名,以辅助增加可读性。支持中文、英文、数
数据聚合 算子简介 名称: 数据聚合 功能说明: 数据聚合算子,将数据按窗口周期进行汇聚计算,以达到规约数据的目的。 约束:下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明: 算子名称,对算子进行个性化的命名,以辅助增加可读性。
数据过滤 算子简介 名称:数据过滤 功能说明:根据设置的条件过滤数据,满足条件的数据则输出,不满足条件的数据将被丢弃。 约束:下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明:算子名称,对算子进行个性化的命名,以辅助增加可读性。
数据扁平 算子简介 名称:数据扁平 功能说明:数据扁平算子,把数据流中的嵌套Json字段转换为多个独立字段。 约束:下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明:算子名称,对算子进行个性化的命名,以辅助增加可读性。支持中文、
选择属性 算子简介 名称:选择属性 功能说明:在输入数据中选择保留的属性,未选择的属性被删除。 约束:下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明:算子名称,对算子进行个性化的命名,以辅助增加可读性。支持中文、英文、数字、中划线、下划线,长度小于等于64个字符。
启动作业时,系统会自行判断用户的作业是否需要实时计算资源,若需要实时计算资源,则会弹出如下对话框供用户自行选择: 计算资源:一个计算资源对应的物理资源为:1核CPU、4G内存,可实时清洗的数据量为1000条/S(仅供参考,请结合各自的业务场景与数据大小进行评估)。 并行数:管道作业运行时的实际并发能力,不得超过“计算资源
数据存储输出 算子简介 名称: 数据存储输出 功能说明: 数据输出到指定的数据存储。 约束:下游不允许接任何算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明: 算子名称,对算子进行个性化的命名,以辅助增加可读性。支持中文、英文、数字、中划线、下划线,长度小于等于64个字符。
数据源配置概述 IoT数据分析服务支持多种数据源类型,用户可选择合适的数据源并进行配置: IoTDA实时数据源:将IoT设备接入服务(IoTDA)作为数据源,IoT设备接入服务将转发设备上报的数据到IoT数据分析服务,之后您可以通过IoT数据分析服务分析设备上报数据。 DIS数据
数据计算 算子简介 名称:数据计算 功能说明:按照表达式进行数值计算,计算的结果赋值给某个属性。举例:原消息中有温度属性,其数值是以摄氏度数值表示,可以通过本算子设置计算公式,将摄氏温度计算转换成华氏度读数再赋予给原来的温度属性,或者可以选择将计算转换后的数值赋予一个新属性。 约
运行数据管道 运行数据管道 运行过程监控与数据跟踪(敬请期待) 父主题: 数据管道
IoT设备接入数据源 算子简介 名称: IoT设备接入数据源 功能说明: 使用IoTDA云服务作为pipeline的数据源,接入IoTDA的数据。 约束:下游仅允许接产品过滤算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明: 算子名称,对算子进行个性化的命名,以辅
DIS数据源 算子简介 名称: DIS数据源,IoT数据分析服务仅在华为云部署形态支持DIS数据源。 功能说明: 使用DIS云服务作为pipeline的数据源,从DIS中获取数据。 约束: 下游不允许对接数据源,目前有:IoT设备接入数据源、DIS数据源,及产品过滤算子。 算子配置
接收数据类型不同的作业可使用的算子有何区别? 实时分析目前有两种接收数据类型:管道数据和资产数据。管道数据表示使用来自“数据管道”的数据进行实时分析,资产数据表示使用经过“资产建模”之后的数据进行实时分析。 可使用的算子区别在于输入、输出部分:当接收数据类型为“管道数据”时,输入
通过API数据源上报设备数据 功能介绍 通过API数据源上报设备数据 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI POST /v1/{project_id}/da
数据源配置 IoTDA数据源 在画布上选中“IoT设备接入数据源”算子,在右侧配置面板处,可修改算子名称、选择数据源、填写事件时间字段路径、时间格式,如图。 使用IoTDA数据源时,系统会自动根据所选择的数据源生成这些配置,用户可检查这些配置是否正确,根据自己的需要进行修改。 DIS数据源配置
该实时作业正在被资产模型使用,无法进行当前操作 错误码描述 该实时作业正在被资产模型使用,无法进行当前操作。 可能原因 当作业被用于资产模型上的分析任务时,不允许对其进行修改。 处理建议 打开该实时作业详情页面,选中任意算子,查看算子配置面板右上角的提示,如图所示: 根据步骤1的提示,找到对应的资产模型,
数据源--添加IoTDA实时数据源 前提条件 您已开通IoT设备接入服务 操作步骤 使用华为云租户主账号登录进入“IoT数据分析”服务控制台。 在左侧导航栏选择“数据源>IoTDA实时数据源”,点击页面中“立即授权”按钮进行确认授权。以便后续IoT数据分析服务与IoTDA服务能够互相访问租户数据。
其他数据源的使用 其他类型数据源的数据管道的创建操作与IoTDA实时数据源、DIS数据源操作类似,因此不再详述。 父主题: 创建数据管道
运行过程监控与数据跟踪(敬请期待) 父主题: 运行数据管道
数据输出配置 数据存储输出 将数据输出到IoT数据分析服务的存储,以便进一步分析(资产建模、实时分析、时序分析)使用。 用户可以配置算子名称、选择存储组、填写存储名称,并选择所需要的属性及属性类型等信息,如图所示: DIS输出 将数据输出到DIS云服务,IoT数据分析服务仅在华为云部署时支持输出到DIS云服务。