检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
edit log. We expected txid XXX, but got txid XXX. 解决方法 参考修改集群服务配置参数，进入HDFS“全部配置”页面，搜索并查看“dfs.namenode.name.dir”参数值获取NameNode数据目录，例如获取到数据目录为“/
properties").getPath(); // 包含配置信息的文件 String file = "file://" + hiveClientProperties; // 运行时，把配置信息放到HDFS上 config.set("tmpfiles"
Hive on HBase 配置跨集群互信下Hive on HBase 删除Hive on HBase表中的单行记录 父主题： 使用Hive
使用Tez 访问Tez WebUI查看任务执行结果 Tez常用配置参数 Tez日志介绍 Tez常见问题
and CLOUD_SDK_SK in the local environment ak = os.environ["CLOUD_SDK_AK"] sk = os.environ["CLOUD_SDK_SK"] projectId = "{project_id}"
附录 修改集群服务配置参数 访问集群Manager 使用MRS客户端
Flink运维管理 Flink常用配置参数 Flink对接应用运维管理（AOM） Flink日志介绍 父主题： 使用Flink
Hive运维管理 Hive常用常用配置参数 Hive日志介绍 父主题： 使用Hive
ClickHouse企业级能力增强 通过ELB访问ClickHouse ClickHouse开启mysql_port配置 父主题： 使用ClickHouse
HBase数据操作 创建HBase索引进行数据查询 配置HBase数据压缩格式和编码 父主题： 使用HBase
hadoop.io.compress.GzipCodec 如需要全局设置，即对所有表都进行压缩，可以在Manager页面对Hive的服务配置参数进行如下全局配置： hive.exec.compress.output设置为true mapreduce.output.fileoutputformat
Flume企业级能力增强 使用Flume客户端加密工具 配置Flume对接安全模式Kafka 父主题： 使用Flume
Doris冷热分离 Doris冷热分离介绍 配置Doris冷热分离 父主题： Doris企业级能力增强
准备Flink应用开发环境 准备本地应用开发环境 导入并配置Flink样例工程 父主题： Flink开发指南（普通模式）
样例6：main()方法创建一个job，配置相关依赖，配置相关鉴权信息，提交作业到hadoop集群。 public static void main(String[] args) throws Exception { //加载hiveclient.properties配置文件
开启RocksDB告警 表2 RocksDB告警配置 配置项 默认值 说明 metrics.reporter.alarm.job.alarm.rocksdb.metrics.enable true 是否开启RocksDB监测，默认不开启。只有状态后端为RocksDB时该配置才有效 metrics.reporter
况调整并行度参数。 在会产生shuffle的操作函数内设置并行度参数，优先级最高。 testRDD.groupByKey(24) 在代码中配置“spark.default.parallelism”设置并行度，优先级次之。 val conf = new SparkConf() conf
方案1：新建一张ttl时间为最新需要修改时间TTL属性的表，表结构相同但名不同的表，把原表的数据导入到新表，交换表名字； 方案2：配置加上延迟物化参数，修改表TTL为最新时间，具体步骤如下： 1）在SQL级配置参数并修改TTL：alter table default.test_auto modify ttl EventDate
memory”参数值未设置或设置过小（小于“dfs.blocksize”参数值）时（对应参数值可登录Manager，选择“集群 > 服务 > HDFS > 配置 > 全部配置”搜索该参数获取），则会写入客户端所在的DataNode节点的DISK磁盘，其余副本会写入其他节点的DISK磁盘。 父主题： HDFS常见问题
详细信息请参考如何在CarbonData中配置非安全内存？ 该内存被数据查询和加载共享。所以如果加载和查询需要同时进行，建议将“carbon.unsafe.working.memory.in.mb”和“spark.yarn.executor.memoryOverhead”的值配置为2048 MB以上。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
