检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
创建管道作业接入IoTDA数据 场景说明 用户通过构建管道作业实现对设备数据进行清洗，规整，去重，增加外部业务属性信息等一系列处理，为下一步基于资产模型分析设备属性数据做好准备，本案例中管道作业为计算设备OEE相关指标准备好基础数据。
Endpoint 指定承载REST服务端点的服务器域名或IP，不同服务不同区域的Endpoint不同，您可以从地区和终端节点获取。 例如IAM服务在“华北-北京一”区域的Endpoint为“iam.cn-north-1.myhuaweicloud.com”。
是 AssetJobSource 是 否 是 数据存储数据源（旧） DataStoreSource 是 否 是 资产数据输入（旧） IoTSource 是 否 是 管道数据输入 PipelineSource 是 否 是 转化算子 数据聚合 Aggregate 是 是 是 数据去重
数据去重 为了过滤掉重复数据，使用本算子。支持指定字段是否相同来判断是否是重复数据，比如指定温度字段没有变化则是重复数据，而事件时间字段每条数据取值不同。 支持指定去重超时时长，在超时后，收到的第一条数据不按去重处理，然后重新开始去重计时以及去重检查。
y" : 471 }, "fromOperators" : [ { "id" : "operator6" } ], "configs" : { "basicConfigs" : { "name" : "数据去重"
}, "fromOperators" : [ { "id" : "operator6" } ], "configs" : { "basicConfigs" : { "name" : "数据去重"
y" : 471 }, "fromOperators" : [ { "id" : "operator6" } ], "configs" : { "basicConfigs" : { "name" : "数据去重"
创建管道作业接入IoTDA数据 分析数据的第一步需要将SMT设备上报的数据接入到IoTA服务，基于IoTDA服务授权配置后，数据即会从IoTDA服务自动转发到IoTA中，通过创建管道作业可将从IoTDA转发的数据接入，用户通过构建管道作业实现对设备数据进行清洗，规整，去重，增加外部业务属性信息等一系列处理
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
