检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
20 设置数据转换 单击“下一步”,进入“转换”界面,设置数据传输过程中的转换操作。算子的选择和参数设置具体请参考Loader算子帮助及表3。
20 设置数据转换 单击“下一步”,进入“转换”界面,设置数据传输过程中的转换操作。算子的选择和参数设置具体请参考Loader算子帮助及表3。
表2 输入设置参数 参数名 说明 示例 架构名称 用户指定数据库的模式名 public 表名 表名称 test 表列名 指定要输入的列名 id,name 是否指定分区列 暂只支持不指定分区模式 false 设置数据转换 单击“下一步”,进入“转换”界面,设置数据传输过程中的转换操作
<python -m json.tool>(可选): 把响应的请求转换为json格式。
"" hoodie.datasource.hive_sync.partition_extractor_class 用于提取hudi分区列值,将其转换成hive分区列。
执行su - omm切换为omm用户,根据集群版本编辑对应文件,并适当增大“nodeagent.Xms”初始堆内存参数值和“nodeagent.Xmx”最大堆内存参数值大小,保存修改。
选择“HBase > 服务配置”,将“基础配置”切换为“全部配置”。 搜索并修改“hbase.security.authorization”为“true”(选择第一个HBase下的参数即可)。
登录到集群的master1节点上,然后切换到omm用户下,在/home/omm目录下创建fair-scheduler.xml、llama-site.xml文件。 打开fair-scheduler.xml文件,添加如下配置。
用户可通过"组件管理 > Presto > 服务配置(将“基础配置”切换为“全部配置”) >Presto > resource-groups " 配置资源组。
建议更换兼容的浏览器,例如Google Chrome浏览器。 父主题: Hue常见问题
计费项 变更计费模式 - 支持变更为包年/包月计费模式。 按需转包年/包月 变更规格 支持变更规格,变更规格会影响集群计费。MRS支持以下变更: 节点规格 节点数量 支持变更规格,变更规格会影响集群计费。
使用root用户登录主备OMS节点,切换至omm用户,执行命令sh ${BIGDATA_HOME}/om-0.0.1/sbin/restart-oms.sh重启OMS服务。 主备OMS节点都需要重启。
用户可通过"组件管理 > Presto > 服务配置(将“基础配置”切换为“全部配置”) >Presto > resource-groups " 配置资源组。
hbase.security.authentication hbase.security.authorization hbase.zookeeper.property.clientPort hbase.zookeeper.quorum(域名需要转换为IP) hbase.regionserver.kerberos.principal
Map函数接受一组数据并将其转换为一个键/值对列表,输入域中的每个元素对应一个键/值对。Reduce函数接受Map函数生成的列表,然后根据它们的键缩小键/值对列表。
select to_timestamp('2020-12-18 15:20:05','yyyy-mm-dd hh24:mi:ss'); -- 2020-12-18 15:20:05.000 to_date(string, format) 描述:将字符串按格式转换为日期。
hbase.security.authentication hbase.security.authorization hbase.zookeeper.property.clientPort hbase.zookeeper.quorum(域名需要转换为IP) hbase.regionserver.kerberos.principal
在FusionInsight Manager界面,选择“运维 > 日志 > 在线检索”,选择“Oozie”服务,检索日志关键词“[Oozie Alarm Enhancement][YARN]”,在日志中查看具体告警原因,并进行处理。
业务代码变更且变更类未明确指定SerialVersionUID。 spark内部类变更,且变更类未明确指定SerialVersionUID。
Hive应用开发样例工程介绍 MRS样例工程获取地址为https://github.com/huaweicloud/huaweicloud-mrs-example,切换分支为与MRS集群相匹配的版本分支,然后下载压缩包到本地后解压,即可获取各组件对应的样例代码工程。