检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Kafka集到Mysql目标端报“cannot find record mapping field”错误 原因分析 查看任务mapping配置,源端字段类型的长度超出目标端字段类型的长度限制,或者配置的映射字段中某个字段在源端的数据中不存在。
FDI通过公网对接其他租户的MRS HIVE如何配置? 首先需要将MRS的IP全部绑定EIP,然后在MRS配置文件中的私网IP全部替换成EIP,再到hdfs-site.xml文件中添加一个配置项“dfs.client.use.datanode.hostname”,值设为“true”
APIConnectResponse类说明 路径 com.roma.apic.livedata.provider.v1.APIConnectResponse 说明 在execute函数中返回此类对象,可以指定调用函数API接口返回的HTTP状态码、返回头和body体。 使用示例 1
附录:QuartZ Cron表达式配置说明 参数说明 数据集成任务支持使用QuartZ Cron表达式配置定时任务的调度计划。 QuartZ Cron表达式由6个部分组成,每个部分使用空格隔开。表达式中的六个部分从左到右代表的含义如下: 秒 分 时 日 月 周 具体参数如表1所示。
单击“自动Mapping”,自动建立源端和目标端数据字段间的映射规则。如果两端的数据表字段不一致,您需要为目标端字段选择对应的源端字段。 单击“保存”,完成数据集成任务的创建。 在“任务管理”页面,在刚创建的数据集成任务右侧单击“启动”,启动任务。
否 String 后端API归属的集成应用编号 app_name 否 String 后端API归属的集成应用名称 name 否 String 后端API名称 status 否 String 后端API状态,支持1,3,4,分别表示待开发,开发中和已部署状态 path 否 String
API归属的集成应用编号 更新后端API时,status=4为后端API的已部署状态,该状态下后端API归属的集成应用编号不能修改。
部署Filebeat和ELK 部署Filebeat 登录SHUBAO组件所在节点,切换root用户。 执行以下命令对filebeat.yml文件进行授权。 cd /filebeat sudo chown root filebeat.yml 执行以下命令启动Filebeat。 docker-compose
自定义后端服务(V1) 查询后端API列表 创建后端API 查询后端API详情 修改后端API 删除后端API 查询后端API测试结果 查询后端API部署历史 部署后端API 测试后端API 撤销后端API 创建后端API脚本 父主题: 服务集成API(V1)
查询设备Topic列表 功能介绍 通过调用API查询Topic名称、Topic id、Topic权限、关于此Topic的说明等信息。 URI GET /v1/{project_id}/link/instances/{instance_id}/topics 表1 参数说明 参数 类型
FDI任务只能采集单张表到单张表吗? 普通任务只能从源端的单个表采集到目标端单个表,组合任务可以配置多个表采集到多个表。 父主题: 数据集成普通任务
var httpExecutor = new HttpClient(); var obj = JSON.parse(data); var host = 'xx.xx.xxx.xx:xxxx'; var headers = { 'clientapp
"); requestConfig.setContent("body"); requestConfig.setContentType('application/json'); var client = new HttpClient(); var resp
SoapConfig类说明 路径 com.roma.apic.livedata.config.v1.SoapConfig 说明 配合SoapClient使用,对SOAP请求进行配置。 构造器详情 public SoapConfig() 构造一个无参数的SoapConfig 方法列表
JSONHelper类说明 路径 com.huawei.livedata.lambdaservice.util.JSONHelper 说明 提供Json与Xml、Map之间的相互转换。 方法列表 返回类型 方法和说明 static String json2Xml(String json
ExchangeConfig类说明 路径 com.roma.apic.livedata.config.v1.ExchangeConfig 说明 与RabbitMqConfig和RabbitMqProducer配合使用,对交换器进行配置。 构造器详情 public ExchangeConfig
可选参数的使用 数据API中使用中括号[]标记可选参数,例如以下SQL执行语句: select * from table01 where id=${id} [or sex='${sex}'] 用[]括起来的那部分语句,表示当后端服务请求中携带参数${sex}时候,才会生效;不带参数
更新网关子设备状态响应 主题Topic Topic /v1/devices/{gatewayId}/topo/updateResponse 消息发送方 物联网平台 消息接收方 边设备 参数说明 字段名 必选/可选 类型 参数描述 mid 必选 Integer 命令ID。 statusCode
配置MySQL CDC(Binlog) 概述 CDC(Change Data Capture),即数据变更抓取,通过为源端数据源开启CDC,ROMA Connect可实现数据源的实时数据同步以及数据表的物理删除同步。 本章节主要介绍如何为MySQL数据库开启Binlog模式CDC功能
API到MySQL的定时任务时会出现源端报“connect timeout”错误 原因分析 数据面有6个节点,其中两个节点ping不通API的IP。 解决方案 属于网络问题,需要找VPC定位。 父主题: 数据集成任务