检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
env.log 实例启停前的环境信息日志。 审计日志 mapred-audit-jobhistory.log MR操作审计日志。 SecurityAuth.audit MR安全审计日志。 日志级别 MapReduce中提供了如表2所示的日志级别。
yarn-start-stop.log Yarn服务启停操作日志。 yarn-prestart.log Yarn服务启动前集群操作的记录日志。 yarn-postinstall.log Yarn服务安装后启动前的工作日志。
CCSideCar MemArtsCC的管理面服务,提供MemArtsCC服务监控采集、配置下发、服务启停等能力。 CCWorker MemArtsCC的数据面服务,支持MemArtsCC的缓存数据读写、存储、淘汰等能力。 父主题: MemArtsCC
yarn-start-stop.log Yarn服务启停操作日志。 yarn-prestart.log Yarn服务启动前集群操作的记录日志。 yarn-postinstall.log Yarn服务安装后启动前的工作日志。
/webhcat/webhcat-console-error.out Webhcat进程启停异常日志 /webhcat/prestartDetail.log WebHCat启动前的工作日志 /webhcat/cleanupDetail.log Webhcat卸载时或安装前的清理日志
/webhcat/webhcat-console-error.out Webhcat进程启停异常日志 /webhcat/prestartDetail.log WebHCat启动前的工作日志 /webhcat/cleanupDetail.log Webhcat卸载时或安装前的清理日志
be/stop_be.log BE进程停止日志 /be/check_be_status.log BE服务启动是否成功的检查日志 /be/be.out BE进程标准/错误输出的日志(stdout和stderr) /dbroker/start_broker.log DBroker进程启停正常日志
解决Hive对接外部LDAP的时候,客户需要支持域名的方式连接,当前Hive只支持IP的方式进行连接的问题。 解决HiveConction异常未打印,影响问题定位的问题。 解决DGC提交Hive作业,执行偶现并发修改ArrayList报错的问题。
String[] word = s.split(","); return new Tuple3<>(word[0], word[1], word[2]); } }); //将Stream1注册为
可用于创建DataFrame,注册DataFrame为一张表,表上执行SQL等。 pyspark.sql.DataFrame:分布式数据集。DataFrame等效于SparkSQL中的关系表,可被SQLContext中的方法创建。
以下版本默认开启了集群自动注册DNS,也可以请通过查询对应版本元数据查询返回体中features字段是否包含register_dns_server这个值来判断是否支持DNS特性。
如果一个job,每个map或reduce的执行时间只有几秒钟,就意味着这个job的大部分时间都消耗在task的调度和进程启停阶段,因此需要增加每个task处理的数据大小。建议一个task处理时间为1分钟。 控制单个task处理时间的大小,可以通过如下配置来调整。
基本概念 账号 用户注册华为云时的账号,账号对其所拥有的资源及服务具有完全的访问权限,可以重置用户密码、分配用户权限等。由于账号是付费主体,为了确保账号安全,建议您不要直接使用账号进行日常管理工作,而是创建用户并使用用户进行日常管理工作。
IoTDB管理员权限 delete storage group root.ln; CREATE_FUNCTION 注册UDF。
如果一个job,每个map或reduce的执行时间只有几秒钟,就意味着这个job的大部分时间都消耗在task的调度和进程启停阶段,因此需要增加每个task处理的数据大小。建议一个task处理时间为1分钟。 控制单个task处理时间的大小,可以通过如下配置来调整。
UDF-CLASS-FULL-PATHNAME>' 例如,注册名称为“example”的UDF命令为: CREATE FUNCTION example AS 'com.xxx.bigdata.iotdb.UDTFExample' 由于IoTDB的UDF是通过反射技术动态装载的,因此您在装载过程中无需启停服务器
Manager的控制进程,负责各种管理动作的执行: Web Service将各种管理动作(安装、启停服务、修改配置等)下发到Controller。 Controller将命令分解,分解后将动作下发到每一个Node Agent。例如启动一个服务,会涉及多个角色和实例。
注册临时表并查询: val roViewDF = spark.read.format("org.apache.hudi").load(basePath + "/*/*/*/*") roViewDF.createOrReplaceTempView("hudi_ro_table") spark.sql
提供集群、服务、角色实例的操作功能,满足您一键启停等操作需求。 MRS Manager简介 EIP方式访问集群 通过EIP访问快速便捷的访问Manager,及开源组件Web站点。
consumer实际上是靠存储在zk中的临时节点来表明针对哪个topic的哪个partition拥有读权限的。所在路径为:/consumers/consumer-group-xxx/owners/topic-xxx/x。