检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
提交wordcount作业。 在MRS控制台选择“作业管理”页签，单击“添加”，进入“添加作业”页面，具体请参见运行MapReduce作业。 图4 wordcount作业 作业类型选择“MapReduce”。 作业名称为“mr_01”。 执行程序路径配置为OBS上存放程序的地址。例如：o
警信息，同时在FusionInsight Manager界面上看不到该客户端的相关信息。 “-c”（可选）：指定业务配置文件，该文件需要用户根据自己业务生成，具体操作可在Flume服务端中“配置工具”页面参考Flume业务配置指南章节生成，并上传到待安装客户端节点上的任一目录下。
如果开启了HDFS联邦，HFile文件输出路径必须和需要导入数据的HBase在同一个NameService中。 例如：HDFS目录挂载情况如表3所示，如果HBase服务目录挂载在NS1上，则Spark Bulkload工具输出路径必须挂载在NS1上，因此，可以指定输出路径在“/tmpns1”目录下。 表3 HDFS目录挂载示例
全部配置”。在搜索框输入“broker.id”，查看并记录当前Broker实例的Broker ID。 重复2，查看并记录每一个Broker实例的Broker ID。 选择“集群 > 服务 > Kafka > 配置 > 全部配置 > Broker(角色) > 服务”。在搜索框分别输入“advertised”和
s>.[编号].log.zip”。最多保留最近的100个压缩文件，压缩文件保留个数可以在参数配置界面中配置。 在MapReduce服务中，JobhistoryServer会定时去清理HDFS上存储的旧的日志文件（默认目录为HDFS文件系统中的“/mr-history/done”）
add("DROP TABLE child"); executeSql(url, sqlList); 样例工程中的data文件需要放到HDFS上的home目录下 保证data文件和创建的表的所属的用户和用户组保持一致 拼接JDBC URL。 HA模式下url的host和port必须为“ha-cluster”。
如果在导出过程中出现错误，可能会有导出文件残留在远端存储系统上，Doris不会清理这些文件，需要手动清理。 导出命令的超时时间同查询的超时时间，可以通过SET query_timeout=xxx进行设置。 对于结果集为空的查询，依然会产生一个大小为0的文件。 文件切分会保证一行数据完整的存储在单一文件中，因此文件的大
Hive对接外部LDAP配置说明 应用场景 本章节介绍Hive如何对接外部LDAP并访问HiveServer。 为了管理集群中数据与资源的访问控制权限，在安全模式下，客户端应用程序在访问集群中的任意资源之前均需要通过身份认证，建立安全会话链接。 MRS通过KrbServer为所有组件提供Kerberos认证功能，实现了可靠的认证机制。
始只包含一个Region，随着表中数据的增多，当一个Region的大小达到容量上限后会分裂成两个Region。可以在创建表时定义Region的RowKey区间，或者在配置文件中定义Region的大小。 图1 HBase数据模型 Phoenix是构建在HBase之上的一个SQL中间
<headerKey> - 设置某一个分组采集数据时event中的key-value值。 byteOffsetHeader false 是否在每一个event头中携带该event在源文件中的位置信息。设置为true，则该信息保存在byteoffset变量中。 maxBatchCount Long.MAX_VALUE
以下Flink权限配置示例供参考，在实际业务场景中可根据业务需求灵活调整。 登录FusionInsight Manager。 选择“系统 > 权限 > 角色 > 添加角色”，根据服务的权限控制类别添加业务开发时需要的权限。 填写角色的名称，例如developrole。 在“配置资源权限”的表格中选择“待操作集群的名称
左侧导航栏单击文件。进入“文件浏览器”页面。 勾选目录的复选框，单击页面上方的“操作”，单击“存储策略”。 图1 存储策略 在弹出的对话框中设置新的存储策略，单击“确定”。 在“静态存储策略”页签设置静态存储策略，单击“保存”。 在“动态存储策略”页签可创建、删除、修改动态存储策略，详细的参数介绍如表2所示。 表2 动态存储策略参数介绍
single.replication.exclude.pattern”配置项设置单副本的数据文件和目录。 在MRS管理控制台，选择“服务管理 > HDFS > 服务配置 > 全部配置”，在右上角搜索“dfs.single.replication.enable”，查看该参数值是否为“false”。
新周期的设置在Kerberos服务的配置页面的“系统”标签下，票据刷新周期的修改可以根据实际情况修改“kdc_renew_lifetime”和“kdc_max_renewable_life”的值。 下载并安装HBase客户端程序。 获取相关配置文件。获取方法如下。 在安装好的hb
入库异常。 解决：在代码中生成时间，并生成字段传入或者在ClickHouse中修改表结构，给对应字段默认值。 建议 查询增加重试机制 clickhouse-example.properties的配置文件的loadBalancerIPList可以配置多个ip，在二次样例代码中已经实
https://pypi.org/project/setuptools/#files 将下载的setuptools压缩文件复制到客户端机器上，解压后进入解压目录，在客户端机器的命令行终端执行python3 setup.py install。 如下内容表示安装setuptools的47.3.1版本成功。
x之前版本，如下参数见表4，在MRS的Flink默认配置中不存在，用户如果开启外部连接SSL，则需要添加以下参数。开启外部连接SSL后，因为YARN目前的开源版本无法代理HTTPS请求，所以无法通过YARN代理访问Flink的原生页面，用户可以在集群的同一个VPC下，创建windows虚拟机，在该虚拟机中访问Flink
https://pypi.org/project/setuptools/#files 将下载的setuptools压缩文件复制到客户端机器上，解压后进入解压目录，在客户端机器的命令行终端执行python3 setup.py install。 如下内容表示安装setuptools的47.3.1版本成功。
“drop”操作。 ALTER操作 在“Policy Name”填写策略名称。 “database”右侧填写并选择对应的数据库，在“table”右侧填写并选择对应的表，在“column”右侧填写并选择对应的列名称，支持通配符（“*”）匹配。 在“Allow Conditions”区域，单击“Select
kafka-test 安全模式下，在提交“source.jar”之前，请确保已经进行kerberos安全登录，并且keytab方式下，登录用户和所上传keytab所属用户必须是同一个用户。 安全模式下，Kafka需要用户有相应Topic的访问权限，因此首先需要在Kafka所在集群上使用Kafka管
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
