检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
URL地址。端口号默认为1521。 可选择如下格式： jdbc:oracle:thin@Oracle数据库所在的IP地址:端口号/Oracle数据库pdb名称 jdbc:oracle:thin@Oracle数据库所在的IP地址:端口号:Oracle数据库实例名称。 jdbc:oracle:thin:@192
-compress 压缩参数，默认数据不压缩，通过该参数可以使用gzip压缩算法对数据进行压缩，适用于SequenceFile，text文本文件，和Avro文件。 –compression-codec Hadoop压缩编码，默认为gzip。 –null-string <null-string>
当系统检测到HBase服务的关键目录都不存在坏块时，告警清除。 该告警仅适用于MRS 3.5.0及之后版本。 告警属性 告警ID 告警级别 是否可自动清除 19036 紧急 是 告警参数 类别 参数名称 参数含义 定位信息 来源 产生告警的集群名称。 服务名 产生告警的服务名称。 角色名
JDBC连接属性 JDBC连接属性，单击“添加”手动添加。 名称：连接属性名。 值：连接属性值。 ftp-connector FTP服务器的IP FTP服务器的IP地址。 FTP服务器端口 FTP服务器的端口号。 FTP用户名 访问FTP服务器的用户名。 FTP密码 访问FTP服务器的密码。
haclusterX”，值为“目标集群主NameNode实例节点业务IP:RPC端口”；新增自定义参数“dfs.namenode.rpc-address.haclusterX1”，值为“目标集群备NameNode实例节点的业务IP:RPC端口”，NameNode RPC端口默认为“2500
密。此处的值还可以设置为“rc4”，避免出现安全隐患，不推荐设置为该值。 3des dfs.encrypt.data.transfer.cipher.suites 可以设置为空或“AES/CTR/NoPadding”，用于指定数据加密的密码套件。如果不指定此参数，则使用“dfs.encrypt
实例，可在“实例”页面勾选“配置过期”的实例，选择“更多 > 重启实例”。 配置参数前包含图标时，表示该参数为动态生效，保存配置后参数值会自动刷新到配置文件中。（动态生效图标仅MRS 3.2.0及之后版本支持） 父主题： 管理MRS集群组件
态，当检测到NameService服务不可用时产生该告警。 NameService服务恢复时，告警清除。 告警属性 告警ID 告警级别 可自动清除 14010 严重 是 告警参数 参数名称 参数含义 ServiceName 产生告警的服务名称。 RoleName 产生告警的角色名称。
3.0及之后版本支持。 region_repair_data_volume ConfigNode 10 Region数据量大于此阈值后进行自动修复， 默认值为：10GB。 说明： 该参数仅MRS 3.3.0及之后版本支持。 dest_datanode_remaining_disk_space_proportion
-hDoris FE实例IP地址 执行命令后输入数据库登录用户密码。 Doris FE的查询连接端口，可以通过登录Manager，单击“集群 > 服务 > Doris > 配置”，查询Doris服务的“query_port”参数获取。 Doris FE实例IP地址可通过登录MRS集群的Manager界面，单击“集群
在“Table Name”填写Hive表的名称。 支持字母、数字、下划线，首位必须为字母或数字，且长度不能超过128位。 根据需要，在“Description”填写Hive表的描述信息。 在“Input File or Location”单击，在HDFS中选择一个用于创建Hive表文件。此文件将存储Hive表的新数据。
int(dataArr[2])))\ .collect() df = sqlCtx.createDataFrame(inputRDD) # 注册表 df.registerTempTable("FemaleInfoTable") # 执行SQL查询并显示结果
int(dataArr[2])))\ .collect() df = sqlCtx.createDataFrame(inputRDD) # 注册表 df.registerTempTable("FemaleInfoTable") # 执行SQL查询并显示结果
状态快速筛选作业。 表1 作业列表参数 参数 参数说明 作业名称/ID 作业的名称，新增作业时配置。 ID是作业的唯一标识，作业新增后系统自动赋值。 用户名称 提交作业的用户名称。 作业类型 作业类型。 说明： 在MRS集群“文件管理”页面进行文件的导入导出操作后，您可以在“作业
getOrCreate() import spark.implicits._ //通过隐式转换，将RDD转换成DataFrame，然后注册表 spark.sparkContext.textFile(args(0)).map(_.split(",")) .map(p
return femaleInfo; } }); // 注册表。 Dataset<ROW> schemaFemaleInfo = spark.createDataFrame(femaleInfoJavaRDD
getOrCreate() import spark.implicits._ //通过隐式转换，将RDD转换成DataFrame，然后注册表 spark.sparkContext.textFile(args(0)).map(_.split(",")) .map(p
conf）。user.keytab和krb5.conf文件为安全模式下的认证文件，需要在FusionInsight Manager中下载principal用户的认证凭证，样例代码中使用的用户为：sparkuser，需要修改为准备好的开发用户。 打包项目 将krb5.conf和user.keytab
用于ApplicationMaster与ResourceManager之间。ApplicationMaster使用该协议向ResourceManager注册、申请资源、获取各个任务的运行情况等。 表2 ApplicationMasterProtocol常用方法 方法 说明 allocate(AllocateRequest
P服务器的配置信息。 表1 连接参数 参数名 说明 示例 名称 SFTP服务器连接的名称。 sftpName Sftp服务器的IP SFTP服务器的IP地址。 10.16.0.1 Sftp服务器端口 SFTP服务器的端口号。 22 Sftp用户名 访问SFTP服务器的用户名。 root
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
