检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
为什么实时分析任务没能输出期望的结果? 实时分析任务中哪个算子环节出错了? 算子处理后的数据结果是什么样的? 以上问题是我们在开发阶段经常遇到的问题。为了解决以上问题,我们提供了调试实时分析工具。用户可以上报测试数据对实时分析业务流程进行测试,用户可直观查看测试数据在每个算子输入和输出的内容。 工作原理:
使用DIS数据源 点击导航栏上的“数据管理”标签,进入数据管道页面,在“管理列表”部分有一按钮“创建数据管道”,如图所示: 点击“创建数据管道”按钮,弹出“创建数据管道”对话框,用户可自行填写“作业名称”(注意:同一用户所创建的作业名称不可重复)、“描述”,并选择数据源(若列表为
eventTime 时间戳字段,Long类型,用户可自定义数值。 是 data 管道输出字段集合,数据支持integer、double、string、object(josn)类型。用户可自定义data内部字段名和值。 是 资产数据输入(旧) 数据模板 字段名 字段说明 是否必填 { "type":
IoTA.02010209 此标签或属性名称已存在 错误码描述 此标签或属性名称已存在。 可能原因 同一个存储中已存在相同的标签名称或属性名称。 处理建议 修改此新增的标签或属性名称,使与已有的名称不重复。 父主题: 存储管理相关错误码
使用IoTDA数据源 前置条件 需要在IoT数据分析服务 - 数据源环节已创建好IoTDA实时数据源。 操作步骤 访问“IoT数据分析”服务产品页,点击“立即使用”进入"IoT数据分析"服务控制台。 在左侧导航栏选择“数据管理”,进入数据管道页面,在“管理列表”点击“创建数据管道”。
其他数据源的使用 其他类型数据源的数据管道的创建操作与IoTDA实时数据源、DIS数据源操作类似,因此不再详述。 父主题: 创建数据管道
IoTA.03011006 作业名已存在 错误码描述 作业名已存在。 可能原因 创建实时分析作业或修改已有的实时分析作业名称时,已经存在与该作业名相同的作业,实时分析作业名称要求在项目内唯一。 处理建议 修改作业名称。 父主题: 实时分析相关错误码
使用IoTA实现电子工厂SMT产线OEE分析实践 本实践以某电子工厂SMT产线为例,介绍使用IoT数据分析服务实现对SMT产线各设备OEE分析和关键指标监控的总体流程。 业务场景介绍 SMT产线一般有以下6类设备,分别是 镭雕机 印刷机 SPI(锡膏检测仪) 贴片机 回流炉 AOI(光学检测仪)
Object pipelineName:作业名称;pipelineDescription:作业描述;pipelineType:支持API、IDE、IOTDA_API类型。管道作业详细配置(管道作业详细配置,每个作业可选择不同的算子进行组合,各算子的使用方法详见:数据管道算子使用指南。) 响应参数
按照表达式进行数值计算,计算的结果可以赋值给源属性,也可以自定义属性名称及路径。 添加好算子节点后,在算子节点上点击鼠标左键,即可打开右侧的算子配置面板,如图: 选择属性 在输入数据中选择保留的属性,未选择的属性被删除。当数据字段较多时,用户可使用该功能筛选出业务所关系的字段。 添加好算子节点后
使用资产模型实时计算产线和设备OEE 场景说明 在完成SMT产线和设备模型及资产构建并发布后运行,系统自动根据模型结合资产数据计算引擎,根据设备上报的数据对SMT产线和设备OEE进行实时计算,通过Console的资产监控页面可对设备状态、设备关键属性、设备数据异常告警等进行实时监控。
说明:变量,把输入消息中的属性作为变量在表达式中使用。对变量进行定义,设置变量名称和变量的取值。 必选:否 子配置项:变量配置包括如下子配置项:变量名称、变量取值。 变量名称: 配置项英文名:variable 说明:变量名称,用户可自定义一个变量名称,计算时使用,以免配置计算表达式时使用jsonPath。 类型:STRING
合JsonPath的语法描述。 event_time:此算子中增加的中间临时字段,不会作为最后输出。 TimeFunction.stringToLong()为系统内置时间转换函数,在表达式中可以直接使用。 为打印机再添加“数据计算算子”,右键单击算子图标,弹出菜单中选择“数据计算”算子,如下图所示
Path格式来指定删除的属性。可以允许设置多个属性,表示删除多个属性。 类型:STRING 必选:是 约束:需要符合正则表达式: ^.{1,1000}$。 高级配置项 并行数: 配置项英文名:parallelism 说明:并行数,指定算子执行时的并行任务个数。对于性能要求越高的算子,可以设置较高的并
配置项英文名:parallelism 说明: 并行数,指定算子执行时的并行任务个数。对于性能要求越高的算子,可以设置较高的并行数,但是占用资源越多。如果此参数不设置,那么作业运行时本算子使用作业的并行数设置。 类型: INTEGER 必选: 否 约束: 最小值1, 最大值 1024。 分区策略:
存储组 存储组可以将多个存储按照相同的数据保存策略(数据保存时间)统一管理。一个存储组内可以包含多个存储,一个存储只能属于一个存储组并且不可修改为别的存储组。 IoT数据分析服务共享版限制每个租户只有1个存储组,即为默认存储组。 修改数据保存时间 父主题: 存储管理
在图表分析区,折线图可以设置Y轴的显示方式,包含如下3种方式: 堆积:Y轴不重叠; 共享:Y轴重叠,Y轴单位长度代表的刻度等长; 叠加:Y轴重叠,Y轴单位长度代表的刻度不等长。 图2 设置折线图Y轴显示 设置采样间隔 在图表分析区,选择“聚合数据”后,可根据实际的分析场景设置不同的采样间隔
配置项英文名:parallelism 说明:并行数,指定算子执行时的并行任务个数。对于性能要求越高的算子,可以设置较高的并行数,但是占用资源越多。如果此参数不设置,那么作业运行时本算子使用作业的并行数设置。 类型:INTEGER 必选:否 约束:最小值1, 最大值 1024。 父主题: 转换类算子
配置项英文名:parallelism 说明:并行数,指定算子执行时的并行任务个数。对于性能要求越高的算子,可以设置较高的并行数,但是占用资源越多。如果此参数不设置,那么作业运行时本算子使用作业的并行数设置。 类型:INTEGER 必选:否 约束:最小值1, 最大值 1024。 父主题: 转换类算子
产品优势 物联网资产模型感知 IoT数据分析服务是以物联网资产模型为中心的分析服务,不同于公有云上的通用型大数据相关产品,IoT数据分析服务与资产模型深度整合,在相关数据分析作业的定义中,开发者可以方便引用物联网的模型数据,大大提升数据分析的效率。 一站式开发体验 大数据开发技术门