检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
在规则引擎界面单击“创建规则”按钮,规则引擎所属应用需要与普通产品相同。 · 单击规则引擎名称进入规则引擎详情页面,配置数据源端和数据目的端。 数据源端选择之前创建的产品和设备。 数据目的端选择同实例下的MQS。 调试设备 通过规则引擎将采集到的数据转发到MQS,在MQS查看上报的数据,即上报数据到ROMA
Connect实例。具体内容如表1所示。 表1 应用与数据集成平台计费项 计费项 计费项说明 适用的计费模式 计费公式 ROMA Connect实例 华为云ROMA Connect按照您选择的ROMA Connect实例规格进行计费。 包年/包月 实例规格单价 * 购买时长 计费说明(新版) 新版ROMA
准备资源 概述 在创建ROMA Connect实例前您需要提前准备相关依赖资源,包括VPC、子网和安全组。每个ROMA Connect实例都部署在某个虚拟私有云(VPC)中,并绑定具体的子网和安全组,通过这样的方式为ROMA Connect提供一个隔离的、用户自主配置和管理的虚拟网络环境以及安全保护策略。
个partition的一个请求。 较小的批量处理数值比较少用,并且可能降低吞吐量(0则会仅用批量处理)。较大的批量处理数值将会浪费更多内存空间,这样就需要分配特定批量处理数值的内存大小。 buffer.memory 33554432 67108864 producer可以用来缓存
Connect实例。 若原Kafka的Topic为单副本存储,ROMA Connect实例中的Topic为3副本存储,则建议ROMA Connect实例存储空间为原Kafka的3倍。 父主题: 消息集成指导
MRS Hive数据源测试连接失败 原因分析 可能是以下两种原因导致: MRS Hive的配置文件中使用的私网IP,私网IP与FDI数据面IP不通导致连接失败。 HDFS URL填写了根目录hdfs:///hacluster,机机交互用户名填写的用户不具备管理员权限导致连接失败。
PC访问,具体请参考VPC对等连接说明。 级联的实例间跨网互通时,如果经过网闸设备,需要将中台实例和子公司实例的地址和端口提供给网闸设备,并在网闸设备中采用TCP协议摆渡方式打通网络路径。也可以通过专用VPN或隧道来实现跨网互通。 配置实例间的级联关系 配置中台实例到各子公司实例
创建规则引擎目的端 功能介绍 在ROMA Connect创建规则引擎目的端。 URI POST /v1/{project_id}/link/instances/{instance_id}/rules/destinations 表1 参数说明 名称 类型 是否必填 描述 project_id
FDI通过公网对接其他租户的MRS HIVE如何配置? 首先需要将MRS的IP全部绑定EIP,然后在MRS配置文件中的私网IP全部替换成EIP,再到hdfs-site.xml文件中添加一个配置项“dfs.client.use.datanode.hostname”,值设为“true”。
连接器名称首字母生成的标准图标。 连接器名称 填写连接器的名称。 标签 填写连接器的标签。 类别 选择连接器的类别。 HTTP 数据库 华为云服务 SaaS应用 邮箱 其他 消息系统 描述 填写连接器的描述信息,用于识别不同的连接器。 单击“创建并配置详情”,进入连接器的动作配置页面。
在弹窗中配置连接器信息,完成后单击“确定”。 参数 说明 连接名称 填写连接器实例名称。 授权码 GitHub账号授权Token,可在GitHub官网的Settings中创建。 描述 填写连接器的描述信息,用于识别不同的连接器。 支持的动作 新增Pull Request评论 关闭Pull
lambdaservice.util.CacheUtils 说明 提供缓存的存储和查询功能。 使用示例 在使用CacheUtils之前,需要new一个新对象方可调用。 CacheUtils的get方法只允许使用白名单里的几项作为键: "DICT:api_gw_rest_addr"、"DICT:
数据大小:1KB 磁盘类型:SSD 表5 消息集成规格 实例规格 消息集成带宽 TPS(高吞吐场景) TPS(同步复制场景) 分区数上限 存储空间 规格说明 入门版 100MB/s 6万 3万 600 600G Kafka客户端连接数在1500以内,消费组个数在30个以内,业务流量为70MB/s以内时推荐选用。
创建ACL策略 功能介绍 增加一个ACL策略,策略类型通过字段acl_type来确定(permit或者deny),限制的对象的类型可以为IP或者DOMAIN,这里的DOMAIN对应的acl_value的值为租户名称,而非“www.exampleDomain.com"之类的网络域名。
_hybrid) type 否 String 脚本类型 SQL:SQL语句 SP:存储过程 object_name 是 String 返回对象。 最小长度:1 最大长度:32 content 是 String API脚本内容 请对脚本进行base64编码 最小长度:1 最大长度:100000
接入自定义数据源 概述 ABM支持自定义数据源,并用于扩展采集器,支持同一网段内本地ABM服务采集远端服务模型数据,增强扩展能力。 操作步骤 登录ROMA Connect控制台,在“实例”页面单击实例上的“查看控制台”,进入实例控制台。 在左侧的导航栏选择“应用业务模型ABM >
是否必选 参数类型 描述 cluster_id 是 String 云容器引擎集群编号 最大长度:64 namespace 是 String 命名空间 最大长度:64 workload_type 是 String 工作负载类型 deployment:无状态负载 statefulset:有状态负载
是否必选 参数类型 描述 cluster_id 是 String 云容器引擎集群编号 最大长度:64 namespace 是 String 命名空间 最大长度:64 workload_type 是 String 工作负载类型 deployment:无状态负载 statefulset:有状态负载
Object 数据源参数对象。包括连接器接数据库依赖的参数,所有参数组成的Json体。 params 是 Params 连接器所需参数对象。 表2 Params说明 参数 是否必选 参数类型 描述 pagination 否 Pagination 分页对象。 migration 否
租户实例如果有跨VPC通信需求,需控制对端VPC网段不得与内部网段地址冲突。 实例VPC网段与内部网段对应关系如下: 10网段对应172.31.0.0/16内部网段。 172网段对应192.168.0.0/16内部网段。 192网段对应172.31.0.0/16内部网段。 默认实例VPC网段对应192.168.0.0/16内部网段。