检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
yarn jar MRTest-XXX.jar com.huawei.bigdata.mapreduce.examples.MultiComponentExample 如果集群开启了ZooKeeper SSL,则运行该样例前,需要检查配置文件mapred-site.xml(准备运行环境中与准备放置编译出的
不支持GaussDB和HetuEngine数据源列脱敏。 HetuEngine服务在切换权限控制类型时,需要重启整个HetuEngine服务,包括HSConsole页面上正在运行的HetuEngine计算实例。
yarn jar MRTest-XXX.jar com.huawei.bigdata.mapreduce.examples.MultiComponentExample 如果集群开启了ZooKeeper SSL,则运行该样例前,需要检查配置文件mapred-site.xml(准备运行环境中与准备放置编译出的
MRS Hive集群的元数据会默认存储到MRS DBService(华为的Gaussdb数据库),也可以选择RDS(MySQL)作为外置元数据库。 Hive的业务数据,存储在HDFS文件系统或OBS对象存储中。
未开启Kerberos认证的集群默认使用非SSL安全连接,默认连接端口为9000,可登录集群FusionInsight Manager界面,选择“集群 > 服务 > ClickHouse > 配置”,搜索“tcp_port”参数查看。
ssl=true&sslmode=none', 'username' = 'ClickHouse用户,详见说明', 'password' = 'ClickHouse用户密码,详见说明', 'table-name' = 'test1_all', 'driver' = 'com.clickhouse.jdbc.ClickHouseDriver
图3 集群列表 如果用户对本地数据源的访问通道做了SSL加密,则CDM无法通过弹性IP连接数据源。 步骤3:创建MySQL连接 在CDM集群管理界面,单击集群后的“作业管理”,选择“连接管理 > 新建连接”,进入连接器类型的选择界面。
compdbuser 随机密码 MRS 3.1.2及之后版本中存在,DBService组件中GaussDB数据库的管理员用户,用于业务运维场景。该账户密码首次使用需重置。 请参见修改DBService数据库compdbuser用户密码。
图4 ClickhouseJDBCHaDemo.java路径替换 如果clickhouse-example.properties配置文件中未开启SSL,需要使用clickhouse-example.properties路径替换NativeJDBCHaDemo.java中initConnection
在DBServer所在节点执行命令netstat -anp | grep 20051,发现DBService的Gauss进程在启动时并未绑定floatip,只监测了127.0.0.1的本地IP。 解决办法 重新启动DBService服务。
历史报表根据所自定义的时间长度不同,图表横轴中每个时间间隔也会不同,具体监控数据的规则如下: 如果FusionInsight Manager存储所用的GaussDB所在分区的磁盘使用率超过80%时,会清理实时监控数据和周期为5分钟的监控数据。
Gaussdb健康检查异常,导致实例重启。 IAM同步的用户加入supergroup用户组后,无法删除。 高并发认证过程web进程内存增加较多。 Ldap在部分数据主备不一致未能及时触发告警。 Meta缺少进程可用性健康检查。
sslUsed 是否启用ssl加密,安全模式集群配置为“true”。 loadBalancerHttpPort LoadBalance的HTTP、HTTPS端口。
BIGDATA_HOME}/tmp/spark/JDBCServer/io_tmp -Dcarbon.properties.filepath=${SPARK_CONF_DIR}/carbon.properties -Djdk.tls.ephemeralDHKeySize=2048 -Dspark.ssl.keyStore
解决GaussDB健康检查异常,导致实例重启的问题。 解决磁盘监控指标计算错误的问题。 解决主机内存使用率计算错误的问题。 解决主机列表偶现丢失故障主机的问题。 解决租户资源修改用户策略功能无法使用的问题。 解决IAM用户同步失败的问题。
BIGDATA_HOME}/tmp/spark2x/JDBCServer/io_tmp -Dcarbon.properties.filepath=${SPARK_CONF_DIR}/carbon.properties -Djdk.tls.ephemeralDHKeySize=2048 -Dspark.ssl.keyStore
新特性和优化 新特性和优化: 支持磁盘分区扩容 弹性扩缩容过程中的异常告警优化 支持更换i/ir系列磁盘后,自动挂载磁盘 解决的问题 解决的问题 Manager 解决主机监控数据缺失问题; 解决主oms的gaussdb进程占用内存较大的问题; 解决pms心跳检查客户端无法将localhost
aos资源异常 ALM-12070 controller资源异常 ALM-12071 httpd资源异常 ALM-12072 floatip资源异常 ALM-12073 cep资源异常 ALM-12074 fms资源异常 ALM-12075 pms资源异常 ALM-12076 gaussDB
opengaussdb Schema 待检测数据库的Schema名称。 oprngaussschema Datastore Type 上层源的类型。
如源端是DWS时命令行加:--driver com.xxx.gauss200.jdbc.Driver ,如下图。 图3 源端是dws时driver参数 其他数据库根据实际情况填写--driver参数。 父主题: 使用Sqoop