检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
write.format.default'='parquet'); 执行以下命令向Iceberg表中插入数据: INSERT INTO sample_table VALUES (4, 'a'), (5, 'b'), (6, 'c'); 执行以下命令更新表数据: UPDATE sample_table set
如果需要设置此参数来加速查询性能,必须遵循以下规则: 切勿设置该参数为全局生效,禁止使用set global方式进行设置。 设置参数值建议为偶数2或4(最大值不要超过单节点CPU核数的一半)。 设置此参数值时需要观察CPU使用率,CPU使用率小于50%时方可考虑设置。
查看系统默认的queryTimeout时长,连接Doris后执行以下命令: show variables like 'query_timeout'; 如果此值过大,可以执行set global query_timeout=xxx;命令,适当缩短超时时间,拦截时长较长任务。
读数据客户端调优 Scan数据时需要设置caching(一次从服务端读取的记录条数,默认是1),若使用默认值读性能会降到极低。 当不需要读一条数据所有的列时,需要指定读取的列,以减少网络IO。
from-beginning [2017-03-07 09:22:00,658] INFO Fetching metadata from broker BrokerEndPoint(1,10.5.144.2,9092) with correlation id 26 for 1 topic(s) Set
clientMetadata.rackId().isEmpty()) { Set<ReplicaView> sameRackReplicas = partitionView.replicas().stream() //
clientMetadata.rackId().isEmpty()) { Set<ReplicaView> sameRackReplicas = partitionView.replicas().stream() //
此时,Spark Streaming应用会记录终止前读取到的offset位置,以此为基准读取后面的数据,而Kafka offset变小(例如从10万变成1万),Spark Streaming会等待Kafka leader的offset增长至10万之后才会去消费,导致新发送的offset
查看该客户档案,是否有记录相关非标操作。 是,需要详细评估补丁跟非标配置的兼容性。 否,检查结束。 检查集群是否有安装紧急补丁 登录客户集群的主备节点,并进入“/home/omm”。 查看是否存在紧急补丁的目录,比如MRSxxx或者xxxpatch。
检查与DBService连接的网络是否正常 在FusionInsight Manager界面,选择“集群 > 待操作集群的名称 > 服务 > Hue > 实例”,记录主Hue的IP地址。 登录主Hue的IP地址。
systemctl set-property user-2000.slice TasksMax=60000 修改“/etc/systemd/logind.conf”文件中“UserTasksMax”参数值为“60000”(如果该参数为注释项,请取消注释)。
告警属性 告警ID 告警级别 是否可自动清除 19031 紧急:默认阈值为200 重要:默认阈值为100 是 告警参数 类别 参数名称 参数含义 定位信息 来源 产生告警的集群名称。 服务名 产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。
告警属性 告警ID 告警级别 是否可自动清除 16051 紧急(默认阈值为90%) 重要(默认阈值为80%) 是 告警参数 类别 参数名称 参数含义 定位信息 来源 产生告警的集群名称。 服务名 产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。
检查SQL语句执行是否耗时较长 查看告警对象所属的逻辑集群。登录Manager页面,选择“集群 > 服务 > ClickHouse > 逻辑集群 > 查询管理 > 正在进行的慢查询”。
在新的Blacklisting DFSClient failover provider中,故障的NameNode将被记录至一个列表中。DFSClient会利用这些信息,防止客户端再次连接这些NameNode。该功能被称为NameNode blacklisting。
告警属性 告警ID 告警级别 是否可自动清除 50229 紧急 是 告警参数 类别 参数名称 参数含义 定位信息 来源 产生告警的集群或系统名称。 服务名 产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。
明确具体发生告警源IP地址及目标IP,并记录两个IP地址。 登录告警上报节点,在告警上报节点上使用ping命令,向目标节点手动发起ping请求,检查两个节点之间的网络状态是否正常。 是,执行6 否,执行3。 确认节点状态。
插入数据 insert into dataorigin2 select * from dataorigin; 更新数据 UPDATE dataorigin2 SET date_p="2021-03-31" where age="73"; 更新或插入行 UPSERT INTO dataorigin2
在运行Join操作时,提前运行下面语句 SET spark.sql.autoBroadcastJoinThreshold=<size> 其中,<size>根据场景而定,但要求该值至少比其中一个表大。 进行join操作。 这时join的两个table,至少有个表是小于阈值的。
开启物化视图“重写缓存” Session级别: 参考快速使用HetuEngine访问Hive数据源在HetuEngine客户端执行set session rewrite_cache_enabled=true System级别: 使用用于访问HetuEngine WebUI界面的用户登录