检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
务： 连接到Spark 在对CarbonData进行任何操作之前，需要先连接到Spark。 创建CarbonData表 连接CarbonData之后，需要创建CarbonData Table，用于加载数据和执行查询操作。 加载数据到CarbonData表 用户从HDFS中的CSV文件加载数据到所创建的表中。
N或CLOSED。CLOSED状态的队列不接受任何新的allocation请求。 eopen_state String 队列的外在状态（父队列状态）。有效状态为队列自身状态及其父队列状态的组合。CLOSED状态的队列不接受任何新的allocation请求。 active_state
N或CLOSED。CLOSED状态的队列不接受任何新的allocation请求。 eopen_state String 队列的外在状态（父队列状态）。有效状态为队列自身状态及其父队列状态的组合。CLOSED状态的队列不接受任何新的allocation请求。 active_state
否，操作结束。 在FusionInsightManager首页，选择“集群 > Impala > 实例 > 告警上报的Catalog实例 > 图表 > 进程FGCT ”，查看FGC时间是否大于步骤1中的阈值。 是，执行4。 否，执行5。 通过“运维> 告警 > 阈值设置 > 待操作集群的名称
yyy-mm-dd_hh-mm-ss>.[编号].log.zip”。最多保留最近的20个压缩文件，压缩文件保留个数可以在Manager界面中配置。 表1 Flume日志列表 日志类型 日志文件名 描述 运行日志 /flume/flumeServer.log FlumeServer运行环境信息日志。
安全模式下，登录IoTDBServer所在节点的用户名和密码由FusionInsight Manager统一控制，参考准备MRS应用开发用户，确保该用户具有操作IoTDB服务的角色权限。 本端域可以在Manager界面，选择“系统 > 域与互信 > 本端域 ”中查看。 package
在Hadoop生态系统中，无论是HDFS，还是HBase，在面对海量文件存储的时候，在某些场景下，都会存在一些很难解决的问题： 如果把海量小文件直接保存在HDFS中，会给NameNode带来极大的压力。 由于HBase接口以及内部机制的原因，一些较大的文件也不适合直接保存到HBase中。 HF
检查IoTDBServer实例是否故障 在FusionInsight Manager首页，选择“集群 > 待操作集群的名称 > 服务 > IoTDB > 实例”。 查看运行状态为“故障”的数量是否超过总数的50%并尝试重启故障IoTDBServer实例，检查运行状态是否恢复。 是，处理完毕。
针对不同的应用场景，MRS使用到如下实例的裸金属服务器。 鲲鹏 V1实例 规格命名规则 AB.C.D 例如m2.8xlarge.8 其中， A表示系列，例如：s表示通用型、c表示计算型、m表示内存型。 B表示系列号，例如：s1中的1表示通用型I代，s2中2表示通用型II代。 C表示规格，当前系列中的规格大小
等。 可能原因 JobHistoryServer实例异常。 KrbServer服务异常。 ZooKeeper服务异常。 HDFS服务异常。 Yarn服务异常。 处理步骤 检查Mapreduce服务JobHistoryServer实例状态。 在FusionInsight Manager界面，选择“集群
Project”，如图1所示。 图1 创建工程 在“New Project”页面选择“Java”，然后配置工程需要的JDK和其他Java库。如图2所示。配置完成后单击“Next”。 图2 配置工程所需SDK信息 在会话框中填写新建的工程名称。然后单击Finish完成创建。 图3 填写工程名称
MRS使用HDFS的副本机制来保证数据的可靠性，HDFS中每保存一个文件则自动生成1个备份文件，即共2个副本。HDFS副本数可通过“dfs.replication”参数查询。 当MRS集群中Core节点规格选择为非本地盘（hdd）时，若集群中只有一个Core节点，则HDFS默认副本数为1。若集群中Core节点数大于等于2，则HDFS默认副本数为2。
GC_OPTS”参数中“-Xmx”的值为“UserSync使用的堆内存大小”的两倍（可根据实际业务场景进行修改）。 重启受影响的服务或实例，观察界面告警是否清除。 是，处理完毕。 否，执行6。 重启服务期间服务不可用，业务中断。重启实例期间实例不可用，当前实例节点任务会执行失败。
是，执行2。 否，执行4。 登录FusionInsight Manager，选择“运维 > 告警 > 告警”，打开告警“ALM-13008 ZooKeeper Znode数量使用率超出阈值”左侧下拉菜单，在“定位信息”的“服务目录”中获取告警的Znode路径。 以集群用户登录ZooKeepe
API语法说明 本章节描述Segment的API以及使用方法，所有方法在org.apache.spark.util.CarbonSegmentUtil类中。 如下方法已废弃： /** * Returns the valid segments for the query based on the
C_OPTS”参数中“-Xmx”的值为“PolicySync使用的堆内存大小”的两倍（可根据实际业务场景进行修改）。 重启受影响的服务或实例，观察界面告警是否清除。 是，处理完毕。 否，执行6。 重启服务期间服务不可用，业务中断。重启实例期间实例不可用，当前实例节点任务会执行失败。
API语法说明 本章节描述Segment的API以及使用方法，所有方法在org.apache.spark.util.CarbonSegmentUtil类中。 如下方法已废弃： /** * Returns the valid segments for the query based on the
配置多主实例模式 配置场景 集群中支持同时共存多个ThriftServer服务，通过客户端可以随机连接其中的任意一个服务进行业务操作。即使集群中一个或多个ThriftServer服务停止工作，也不影响用户通过同一个客户端接口连接其他正常的ThriftServer服务。 配置描述 登录Manager，选择“集群
API对应的acks参数名称不同 新Producer API 指org.apache.kafka.clients.producer.KafkaProducer中定义的接口，acks配置为acks。 旧Producer API 指kafka.producer.Producer中定义的接口，acks配置名称为request
否，操作结束。 在FusionInsightManager首页，选择“ 集群 > Impala > 实例 > 告警上报的Impalad实例 > 图表 > 进程FGCT ”，查看FGC时间是否大于1中的阈值。 是，执行4。 否，执行5。 通过“运维 > 告警 > 阈值设置 > Impala >进程FGCT
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
