检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
datanode(s) running and 2 node(s) are excluded in this operation”错误 原因分析 HDFS集群节点都绑定了EIP,在创建MRS Hive数据源时,上传的配置文件中全部用的EIP,Hosts里面也配置好IP与Hostname,但是在上
每个接入的数据源都要归属到某个集成应用下,在接入数据源前您需要有可用的集成应用,否则请提前创建集成应用。 MRS Kafka数据源所在的MRS集群已开启Kerberos认证,并已为机机交互用户配置执行权限,具体请参考准备开发用户。 操作步骤 登录ROMA Connect控制台,在“实
控制台。 在左侧的导航栏选择“应用业务模型ABM > 模型采集 > 集群管理”,单击“注册集群实例”,分别填写扩展采集器名称,描述,ak/sk认证基本信息,远端ABM服务节点D的Url地址,新增集群实例。 集群实例创建完成后,在左侧的导航栏选择“应用业务模型ABM > 模型采集 >
支持多种数据结构,包括字符串、哈希表、列表、集合和有序集合等。Redis还提供了一些高级功能,如事务、发布/订阅、Lua脚本执行、持久化和集群等。 Redis默认端口为6379,但是管理员可以根据需要将其更改为其他端口。 创建Redis连接 登录新版ROMA Connect控制台。
DWS变成只读状态导致FDI任务运行失败 原因分析 在DWS磁盘空间达到阈值,例如80%,或者某些大数据量的表存在数据倾斜时,DWS集群会变为只读状态。从FDI侧来看,在某个时间点,所有访问DWS的任务均异常停止。 解决方案 处理DWS只读状态问题,恢复数据库服务后,如果FDI的
步。 truncate方式删除的数据不支持同步,整表方式删除的数据不支持同步。 源端MySQL数据源: 如果MySQL数据库使用的是MGR集群模式,在接入源端数据源时,必须直接连接主节点,不能连接route节点。 如果MySQL数据库中数据量特别巨大,在首次执行数据同步时可能会连
、查询、删除、部署等操作。 自定义认证管理 自定义认证相关API,包括自定义认证的创建、修改、查询、删除等操作。 监控信息查询 监控信息查询相关API,可查询不同监控信息。 实例管理 实例相关API,可查询ROMA Connect的实例信息。 实例特性管理 实例特性配置相关API,包括特性配置、特性查询等操作。
Kafka客户端连接指导,包括Kafka客户端安装,以及生产、消费消息。 前提条件 已获取MQS连接信息,具体请参见开发准备。 已安装开发工具和Python开发语言环境,具体请参见开发准备。 引入Kafka客户端 MQS基于Kafka社区版本1.1.0、2.7,您可以在ROMA
数据集成API 数据源管理 任务监控管理 任务管理
CentOS环境为例,介绍Go版本的Kafka客户端连接指导,包括Kafka客户端安装,以及生产、消费消息。 前提条件 已获取MQS连接信息,具体请参见开发准备。 已安装开发工具和Python开发语言环境,具体请参见开发准备。 引入Kafka客户端 MQS基于Kafka社区版本1.1.0、2.7,您可以在ROMA
本章节以IntelliJ IDEA 2018.3.5版本为例介绍。 前提条件 已获取API的调用信息,具体请参见开发准备。 已安装开发工具和PHP开发语言环境,具体请参见开发准备。 将PHP安装目录中的“php.ini-production”文件复制到“C:\windows”,改名为“php
规格变更前准备 准备资源 在进行ROMA Site实例规格变更前,需要准备以下资源: 虚拟机:与之前机器相同规格且相同架构的Linux机器。 工具:需要安装Docker、NTP、Haveged服务,Docker安装请参考安装Docker,NTP配置请参考时间同步,Haveged的安装
组合应用管理 查看组合应用运行记录 查看组合应用系统日志 查看组合应用监控 导入导出组合应用 创建组合应用模板 引用变量 引用函数表达式
结束时间 流任务的结束时间。 运行ID 流任务的运行ID。 运行时间 流任务的运行时间。 状态 流任务的运行状态。 (可选)配置访问日志,实现异常监控日志的存储。 如果组合应用未启动,请单击“启动并配置运行记录”,选择一个实例启动此组合应用。 如果组合应用已启动,单击“点击开启”弹出“运
本文介绍Java版本的Kafka客户端连接指导,并完成客户端连接以及消息生产与消费的相关示例。 前提条件 已获取MQS连接信息,具体请参见开发准备。 已安装开发工具和Java开发语言环境,具体请参见开发准备。 引入Kafka客户端 MQS基于Kafka社区版本1.1.0、2.7,您可以在ROMA Co
分支判断 并行处理 延时 EDI处理 变量赋值 变量修改 排序 数据转换 数据拆分 数据筛选 脚本处理 日志采集 数据映射 循环处理 异常监控 终止 对称加解密 非对称加解密 XML校验
您需要先获取SDK,然后新建工程,最后参考调用API示例调用API。 前提条件 已获取API的调用信息,具体请参见开发准备。 已安装开发工具和Python开发语言环境,具体请参见开发准备。 Python安装完成后,在命令行中使用pip安装“requests”库。 pip install
本文介绍C#版本的Kafka客户端连接指导,包括Kafka客户端安装,以及生产、消费消息。 前提条件 已获取MQS连接信息,具体请参见开发准备。 已安装开发工具和C#开发语言环境,具体请参见开发准备。 引入Kafka客户端 MQS基于Kafka社区版本1.1.0、2.7,您可以在ROMA Conn
使用Go语言调用APP认证的API时,您需要先获取SDK,然后新建工程,最后参考调用API示例调用API。 前提条件 已获取API的调用信息,具体请参见开发准备。 已安装开发工具和Go开发语言环境,具体请参见开发准备。 已在IntelliJ IDEA中安装Go插件,如果未安装,请按照图1所示安装。 图1 安装Go插件
设备管理”,在页面中可查看MQTT连接地址/MQTTS连接地址,在“设备”页签的设备列表中,可查看要接入设备的“客户端ID”、“用户名”和“密码”信息。 准备开发环境 安装开发工具 安装2018.3.5或以上版本的IntelliJ IDEA,安装包请至IntelliJ IDEA官方网站下载。 安装开发语言环境 安装1