检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
如何重置MRS Kafka数据？ 删除Kafka topic信息即重置Kafka数据，具体命令请参考： 删除topic：kafka-topics.sh --delete --zookeeper ZooKeeper集群业务IP:2181/kafka --topic topicname
执行Spark Core应用，尝试收集大量数据到Driver端，当Driver端内存不足时，应用挂起不退出 问题 执行Spark Core应用，尝试收集大量数据到Driver端，当Driver端内存不足时，应用挂起不退出，日志内容如下。 16/04/19 15:56:22 ERROR
records-per-second.limit，partitions num * scan.records-per-second.limit) 为保证数据准确性将同key数据写入Kafka的同一个分区 Flink写Kafka使用fixed策略，并在写入之前根据key进行Hash。 【示例】 CREATE
调优参数 配置参数 缺省值 调优场景 num.recovery.threads.per.data.dir 10 在Kafka启动过程中，数据量较大情况下，可调大此参数，可以提升启动速度。 background.threads 10 Broker后台任务处理的线程数目。数据量较大的情况下，
values) 测试insertRecord，不实际写入数据，只将数据传输到server即返回。 void testInsertTablet(Tablet tablet) 测试insertTablet，不实际写入数据，只将数据传输到server即返回。 父主题： IoTDB开发指南（安全模式）
调优参数 配置参数 缺省值 调优场景 num.recovery.threads.per.data.dir 10 在Kafka启动过程中，数据量较大情况下，可调大此参数，可以提升启动速度。 background.threads 10 Broker后台任务处理的线程数目。数据量较大的情况下，
径对应的时间序列名称为“ROOT.ln.wf01.wt01.status”。 基本概念： 设备 设备指的是在实际场景中拥有传感器的装置。在IoTDB当中，所有的传感器都应有其对应的归属的设备。 传感器 传感器是指在实际场景中的一种检测装置，它能感受到被测量的信息，并能将感受到的信
集群生命周期管理 MRS支持集群的生命周期管理包括创建集群和删除集群。 创建集群：支持用户定制集群的类型、组件范围、各类型的节点数、虚拟机规格、可用区、VPC网络、认证信息，MRS将为用户自动创建一个符合配置的集群，全程无需用户参与；同时支持用户在集群中运行自定义内容；支持快速创
segment ids >” 如果用户想在多线程模式下查询指定段，可使用CarbonSession.threadSet代替SET语句。 语法： “CarbonSession.threadSet ("carbon.input.segments. <database_name>. <table_name>"
avaRDDs的顺序和list中对应的DStreams保持一致。 <T> JavaDStream<T> union(JavaDStream<T> first,java.util.List<JavaDStream<T>> rest) 从多个具备相同类型和滑动时间的DStream中创建统一的DStream。
avaRDDs的顺序和list中对应的DStreams保持一致。 <T> JavaDStream<T> union(JavaDStream<T> first,java.util.List<JavaDStream<T>> rest) 从多个具备相同类型和滑动时间的DStream中创建统一的DStream。
avaRDDs的顺序和list中对应的DStreams保持一致。 <T> JavaDStream<T> union(JavaDStream<T> first,java.util.List<JavaDStream<T>> rest) 从多个具备相同类型和滑动时间的DStream中创建统一的DStream。
检查网络通讯 检查集群网络工作状态，节点之间的网络通讯是否存在延时。 检查存储状态 检查集群总体数据存储量是否出现了突然的增长： 磁盘使用量是否已接近阈值，排查原因，例如是否有业务留下的垃圾数据或冷数据需要清理。 业务是否有增长需求，磁盘分区是否需要扩容。 检查日志情况 检查是否有失败、失
产生告警的角色名称。 主机名 产生告警的主机名。 设备分区名 产生告警的磁盘分区。 Trigger Condition 系统当前指标取值满足自定义的告警设置条件。 对系统的影响 业务失败：磁盘容量不足时，如果需要修改或使用该磁盘上的数据，可能会导致作业运行失败。 可能原因 告警阈值配置不合理。
日志服务。云日志服务（LTS）用于收集来自主机和云服务的日志数据，通过海量日志数据的分析与处理，可以将云服务和应用程序的可用性和性能最大化，为您提供实时、高效、安全的日志处理能力，帮助您快速高效地进行实时决策分析、设备运维管理、用户业务趋势分析等。具体对接指导请参见MRS服务如何对接云日志服务。
hive.server2.thrift.max.worker.threads HiveServer内部线程池，最大能启动的线程数量。 1000 hive.server2.thrift.min.worker.threads HiveServer内部线程池，初始化时启动的线程数量。 5 hive
Doris数据变更规范 该章节主要介绍Doris数据变更时需遵循的规则和建议。 Doris数据变更规则 应用程序不能直接使用delete或者update语句变更数据，可以使用CDC的upsert方式来实现。 不建议业务高峰期或在表上频繁的进行加减字段，建议在业务前期规划建表时预留
hive.server2.thrift.max.worker.threads HiveServer内部线程池最大能启动的线程数量。 1000 hive.server2.thrift.min.worker.threads HiveServer内部线程池初始化时启动的线程数量。 5 hive
in时候，需要在前面添加Global关键字，避免查询放大问题。 数据查询建议 建议查询指定分区 通过指定分区字段会减少底层数据库扫描的文件数量，提升查询性能，实际经验：700个分区的千列大表，需要查询一个分区中有7000万数据，其他699个分区中无数据，虽然只有一个分区有数据，其他分区无数据，但是查询指定分区为百毫秒
数量。 “taskmanager.network.netty.server.numThreads”和“taskmanager.network.netty.client.numThreads”：默认是“taskmanager.numberOfTaskSlots”，表示netty的客户端和服务端的线程数目设置。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
