检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
能正常从MySQL获取数据并发送到kafka,当整个流程调试通过之后,再把log_level修改为info,然后先停止再启动Maxwell生效。 # log level [debug | info | warn | error] log_level=debug 执行如下命令启动Maxwell。
能正常从MySQL获取数据并发送到kafka,当整个流程调试通过之后,再把log_level修改为info,然后先停止再启动Maxwell生效。 # log level [debug | info | warn | error] log_level=debug 执行如下命令启动Maxwell。
buffer-flush.max-rows' = '100', 'sink.buffer-flush.interval' = '0s' 情况三:数据不sink 'sink.buffer-flush.max-rows' = '0', 'sink.buffer-flush.interval' =
的数据、或者被清洗过滤掉的数据写入OBS中,以便后面查看,可通过该参数配置,写入脏数据前需要先配置好OBS连接。这里保持默认值“否”即可,不记录脏数据。 作业运行完是否删除:这里保持默认值“不删除”。 单击“保存并运行”,回到作业管理界面,在作业管理界面可查看作业执行进度和结果。
意外掉电,还是整个集群意外断电,恢复供电后系统能够正常恢复业务,除非硬盘介质损坏,否则关键数据不会丢失。 硬盘亚健康检测和故障处理,对业务不造成实际影响。 自动处理文件系统的故障,自动恢复受影响的业务。 自动处理进程和节点的故障,自动恢复受影响的业务。 自动处理网络故障,自动恢复受影响的业务。
ROW binlog_row_image = FULL expire_logs_days = 10 修改完成之后需要重启MySQL服务使配置生效。 查看MySQL是否开启GTID功能: 使用show global variables like '%gtid%'命令查看是否开启, 具
在当前已应用规则的所在行,单击“操作”中的“取消应用”。如果没有已应用的规则,则请跳过该步骤。 在新添加规则的所在行,单击“操作”中的“应用”,此时规则的“生效状态”变成“生效”。 修改已有规则 单击待修改规则“操作”列的“修改”。 参考表1修改相关规则参数。 单击“确定”保存。 以下样例以修改“主机内存使用率”为例进行说明。
状态”是为“良好”,“磁盘”、“内存”、“CPU使用率”显示正常(有数值)。 Agent成功启动到主机状态显示正常,最长可能需要3分钟时间生效,请耐心等待。若长时间显示异常,请联系运维人员处理。 在Manager单击“主机 ”,勾选Master节点规格升级前准备中9记录的“Nam
HBase的Scan操作可能分解为多次RPC。由于相关session信息在不同集群间不同步,数据不能保证完全一致,因此双读只在第一次RPC时生效,ResultScanner close之前的请求会固定访问第一次RPC时使用的集群。 HBase Admin接口、实时写入接口只会访问主
HBase的Scan操作可能分解为多次RPC。由于相关session信息在不同集群间不同步,数据不能保证完全一致,因此双读只在第一次RPC时生效,ResultScanner close之前的请求会固定访问第一次RPC时使用的集群。 HBase Admin接口、实时写入接口只会访问主
体限制值时,子租户可以设置为-1。 “每个YARN容器最多分配核数”和“每个YARN容器最大分配内存(MB)”需要同时修改为非-1的值才会生效。 对于开启了跨资源池调度的队列,在作业运行过程中不能删除已有资源池,否则可能会导致运行中的作业申请不到资源而持续阻塞。同样如果在作业运行
primary_key = B.primary_key //该配置在transformer类指定为SqlQueryBasedTransformer才会生效 file:///opt/testconf/tb_test_mor_par_200.properties # 源表tb_test_mor_par_200的配置
ts.conf”和服务端“JDBCserver > 自定义配置” 中设置该参数。 单击“Add”,在策略列表可查看策略的基本信息。等待策略生效后,验证相关权限是否正常。 如果需要禁用某条策略,可单击按钮编辑该策略,设置策略开关为“Disabled”。 如果不再使用某条策略,可单击按钮删除该策略。
ts.conf”和服务端“JDBCserver > 自定义配置” 中设置该参数。 单击“Add”,在策略列表可查看策略的基本信息。等待策略生效后,验证相关权限是否正常。 如果需要禁用某条策略,可单击按钮编辑该策略,设置策略开关为“Disabled”。 如果不再使用某条策略,可单击按钮删除该策略。
rt将提升加载性能,但会降低查询性能。 说明: local_sort与分区表的DDL操作存在冲突,不能同时使用,且对分区表性能提升不明显,不建议在分区表上启用该特性。 carbon.batch.sort.size.inmb - 指定在数据加载期间为批处理排序而考虑的数据大小。推荐
OBS的AccessKey、SecretKey、目录都不能为空! JDBC的IP、端口、数据库、用户名、密码都不能为空! 没有找到xxx可用的驱动! 数据连接的类型不匹配,传入的类型:xxx,实际数据连接的类型为xxx! RDS实例虚拟私有云的ID xxx与集群的虚拟私有云ID xxx不一致! RDS实例子网的ID
当监控数据达到告警阈值,系统将会触发一条告警信息。 查看告警列表 滚动重启服务 在修改了大数据组件的配置项后,需要重启对应的服务来使得配置生效,使用普通重启方式会并发重启所有服务或实例,可能引起业务断服。为了确保服务重启过程中,尽量减少或者不影响业务运行,可以通过滚动重启来按批次