检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
向DWS写入数据时越来越慢怎么解决 原因分析 查看界面上的采集数据,如果写入数据耗时在秒级,属于正常的情况。如果写入几千条数据超过5秒,一般是性能劣化的表现。 解决方案 如果对DWS的某个表频繁访问,会导致写入性能逐渐降低,需要对DWS进行调优,例如,定时使用analyze规划表、VACUUM
2号标记位置的逻辑表示内层逻辑组的关联关系,单击4号标记位置的“添加关联关系”添加内层逻辑组。 3号标记位置的下拉框用于选择两个输入框的内容的逻辑判断,支持“等于”、“不等于”、“小于”、“不小于”、“大于”、“不大于”6个逻辑判断。 图1 分支判断条件 父主题: 处理器
指所选类下所包含的类名称,例如年龄。 条件 指此规则所满足的条件。所支持条件如下: =:等于,例如,分数=60,则过滤出年龄等于60的类。 <>:不等于,例如,分数<>60,则过滤出分数不等于60的类。 <:小于,例如,分数<60,则过滤出分数小60的。 <=:小于等于,例如,分数<=60,则过滤出分数小于等于60的。
OBS源端的CSV文件解析到关系型数据库时,列的值不对怎么办? 任务配置时源端OBS的元数据填写顺序必须与CSV文件中列的顺序一致,需修改任务配置,按照文件中列的顺序填写元数据。 父主题: 数据集成普通任务
s":{"name":"OPCUA_DATA"}}。 表4 条件表达式 操作符 描述 举例 = 相等 color = 'red' <> 不等于 color <> 'red' and 逻辑与 color = 'red' and switch = 'on' or 逻辑或 color =
的顺序匹配规则。 规则:单击“”编辑规则条件表达式。若表达式数量大于等于3个,可通过“转子层级”对表达式进行分层设置。 =:等于 !=:不等于 pattern:正则表达式 enum:枚举值,多个参数值之间用英文逗号分隔 API流量限制:填写API被调用的次数上限,与“时长”配合使用。
建议不要设置敏感信息,以防泄露。 定义规则:单击“”编辑匹配条件表达式。若表达式数量大于等于3个,可通过“转子层级”对表达式进行分层设置。 =:等于 !=:不等于 pattern:正则表达式 enum:枚举值,多个参数值之间用英文逗号分隔 单击“确定”,完成插件策略的创建。 插件策略创建后,您还需要
规则优先级。 匹配条件:单击“”编辑匹配条件表达式。若表达式数量大于等于3个,可通过“转子层级”对表达式进行分层设置。 =为等于 !=为不等于 pattern为正则表达式 enum为枚举值,多个参数值之间用英文逗号分隔 触发条件和后端降级策略配置可参考上方的默认触发条件和降级策略配置。
FDI任务失败,修改问题后任务写入仍然报错 表名存在乱码导致Camel访问数据库失败 插入数据违反非空约束 DWS变成只读状态导致FDI任务运行失败 向DWS写入数据时越来越慢怎么解决
序匹配规则。 定义规则:单击“”编辑匹配条件表达式。若表达式数量大于等于3个,可通过“转子层级”对表达式进行分层设置。 =:等于 !=:不等于 pattern:正则表达式 enum:枚举值,多个参数值之间用英文逗号分隔 触发条件和后端降级策略配置可参考上方的默认触发条件和降级策略配置。
HIVE如何配置? 从OBS解析文件到RDS数据库,采集过一次后,后面采集会进行更新吗? OBS源端的CSV文件解析到关系型数据库时,列的值不对怎么办? MRS Hive目标字段和源端字段数据类型不匹配时,数据是否能集成到目标端? MRS Hive、MRS HBase和MongoDB的
“数据源定义”类似。 写端参数定义 定义数据源的写端参数,在数据集成任务的目标端选择该数据源时,需要配置此处定义的写端参数。ROMA Connect与连接器间交互的消息数据为JSON格式,参数以Key-Value形式传递。 单击“添加参数”,添加数据源的写端参数,具体的参数配置说明与“数据源定义”类似。
CodeArts Build CodeArts Build连接器用于对接华为云CodeArts Build服务。 编译构建(CodeArts Build)基于云端大规模并发加速,为客户提供高速、低成本、配置简单的混合语言构建能力,帮助客户缩短构建时间,提升构建效率。 前提条件 使用CodeArts
度的下降。 普通任务 ROMA Connect支持的数据集成普通任务中不同类型数据源的性能参考如下所示。 数据源类型 读速率(MB/S) 写速率(MB/S) MRS Hive 5 2 MRS HDFS 5 2 DWS 5 2 MySQL 6 3 Oracle 6 2 Kafka 10
501(Writer 任务结束) 502(正在数据写入) 503(目标端异常) 504(数据写入结束) 505(写任务强制取消) 506(在writer plugin中,任务发生了中断) 507(写任务恢复运行) 900(接收到调度请求) 901(任务运行结束) 902(任务已运行结束,正在进行数据完整性校验)
501(Writer 任务结束) 502(正在数据写入) 503(目标端异常) 504(数据写入结束) 505(写任务强制取消) 506(在writer plugin中,任务发生了中断) 507(写任务恢复运行) 900(接收到调度请求) 901(任务运行结束) 902(任务已运行结束,正在进行数据完整性校验)
CodeArts Pipeline CodeArts Pipeline连接器用于对接华为云CodeArts Pipeline服务。 流水线(CodeArts Pipeline)提供可视化、可定制的持续交付流水线服务,实现缩短交付周期和提升交付质量的效果 前提条件 使用CodeArts
查询字典列表 功能介绍 查询字典列表。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI GET /v2/{project_id}/instances/{instance_id}/dictionaries
产品规格差异(新版) 推荐实例规格 使用新版ROMA Connect推荐的规格如下。 表1 推荐规格 支持的系统数 预估RCU个数 使用建议 5个以下 5个 一般用于小型企业 5~10个 20个 一般用于小型企业 10~20个 40个 一般用于中小型企业 20~30个 80个 一般用于中大型企业
CodeArts Artifact CodeArts Artifact连接器用于对接华为云CodeArts Artifact服务。 制品仓库(CodeArts Artifact),是面向软件开发者提供软件发布的云服务,提供软件仓库、软件发布、发布包下载、发布包元数据管理等功能,通