检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
若需要在本地Windows调测HBase样例代码，需参考表1放置各样例项目所需的配置文件： 表1 放置各样例项目所需的配置文件 样例工程位置 需放置的配置/认证文件 hbase-examples/hbase-example（单集群场景） 需将准备运行环境配置文件获取的“core-site.xml”、“hbase-site
SDK 确认工程名称和路径，单击“Finish”完成导入。 图15 Confirm the project name and file location 导入完成后，IDEA主页显示导入的样例工程。 图16 已导入工程 （可选）如果导入Scala语言开发的样例程序，还需要为工程设置语言。
导入并配置Spark样例工程 操作场景 Spark针对多个场景提供样例工程，包含Java样例工程和Scala样例工程等，帮助客户快速学习Spark工程。 针对Java和Scala不同语言的工程，其导入方式相同。使用Python开发的样例工程不需要导入，直接打开Python文件（*
已准备开发环境及MRS集群相关配置文件，详情请参考准备连接Kafka集群配置文件。 操作步骤 获取样例工程文件夹。 参考获取MRS应用开发样例工程，获取样例代码解压目录中“src”目录下的样例工程文件夹“kafka-examples”。 获取配置文件。 若需要在本地Windows调
Streaming等多个样例工程。 若需要在本地Windows调测Spark样例代码，需参考准备Spark连接集群配置文件获取各样例项目所需的配置文件、认证文件，并手动将配置文件导入到Spark样例工程的配置文件目录中。 安装IntelliJ IDEA和JDK工具后，需要在IntelliJ IDEA中配置JDK。
Streaming等多个样例工程。 若需要在本地Windows调测Spark样例代码，需参考准备Spark连接集群配置文件获取各样例项目所需的配置文件，并手动将配置文件导入到Spark样例工程的配置文件目录中。 安装IntelliJ IDEA和JDK工具后，需要在IntelliJ IDEA中配置JDK。
SDK 确认工程名称和路径，单击“Finish”完成导入。 图15 Confirm the project name and file location 导入完成后，IDEA主页显示导入的样例工程。 图16 已导入工程 （可选）如果导入Scala语言开发的样例程序，还需要为工程设置语言。
若需要在本地Windows调测HBase样例代码，需参考表1放置各样例项目所需的配置文件、认证文件： 表1 放置各样例项目所需的配置文件/认证文件 样例工程位置 需放置的配置/认证文件 hbase-examples/hbase-example（单集群场景） 需将以下文件放置在样例工程的“../src/main/resources/conf”目录下：
选择CLICKHOUSE。 - ClickHouse实例 选择ClickHouse。 - 导入前清理数据 选择“true”或“false”。 说明： 如果导入的表为ClickHouse分布式表，且需要清理数据时，请在导入前手动删除ClickHouse分布式表对应的本地表中的数据。 true 单击“保存并运行”，开始保存并运行作业。
原因分析 从外部存储（例如HDFS）导入数据时，由于目录下文件过多，导致列出文件目录超时。 处理步骤 登录FusionInsight Manager，选择“集群 > 服务 > Doris > 配置 > 全部配置 > FE（角色） > 自定义”，新增自定义参数“broker_timeout
Next”，在下一个页面单击“Browse”，显示“浏览文件夹”对话框。 选择样例工程文件夹“hdfs-examples”，单击“确定”。 在“Import”窗口单击“Finish”。 设置Eclipse的文本文件编码格式，解决乱码显示问题。 在Eclipse的菜单栏中，选择“Window
Project”对话框中选择Impala样例工程文件夹，单击“OK”。 导入成功后，com.huawei.bigdata.impala.example包下的JDBCExample类为JDBC接口样例代码。 设置IntelliJ IDEA的文本文件编码格式，解决乱码显示问题。 在IntelliJ
rces”目录下： 准备集群认证用户信息获取的认证文件“user.keytab”和“krb5.conf”。 准备运行环境配置文件获取的配置文件“core-site.xml”、“hiveclient.properties”。 导入样例工程到IntelliJ IDEA开发环境中。 在IntelliJ
某些组件或者业务程序写入的文件大小 distcp 从源集群读文件后写入新集群，默认是使用的MapReduce任务中的dfs.blocksize，默认128M。 在distcp写完文件后，会基于块的物理大小做校验，因为该文件在新旧集群中block.size不一致，因此拆分大小不一致，导致校验失败。 如以上文件，在旧集群是17
Flume业务模型配置说明 业务模型配置指导 本章节适用于MRS 3.x及之后版本。 本任务旨在提供Flume常用模块的性能差异，用于指导用户进行合理的Flume业务配置，避免出现前端Source和后端Sink性能不匹配进而导致整体业务性能不达标的场景。 本任务只针对于单通道的场景进行比较说明。
代替。不能和“架构名称”、“表名”同时配置。 说明： SQL Where语句可以使用宏定义，具体请参考Loader算子配置项中使用宏定义。 select * from test where ${CONDITIONS} 表列名 配置要导入的列，使Loader将列的内容全部导入。配置多个字段时使用“
使用Python远程连接HDFS的端口失败 用户问题 使用Python远程连接HDFS的端口失败，如何解决？ 问题现象 用户使用Python远程连接HDFS的50070端口失败。 原因分析 HDFS开源3.0.0以下版本的默认端口为50070，3.0.0及以上的默认端口为9870
代替。不能和“架构名称”、“表名”同时配置。 说明： SQL Where语句可以使用宏定义，具体请参考Loader算子配置项中使用宏定义。 select * from test where ${CONDITIONS} 表列名 配置要导入的列，使Loader将列的内容全部导入。配置多个字段时使用“
tar”得到“MRS_Flink_ClientConfig”文件夹。 双击“MRS_Flink_ClientConfig/Flink”目录下的“flink_install.bat”脚本，安装成功后得到“lib”文件夹、“examples”文件夹。 “lib”文件夹：只包含Flink依赖jar包，Kaf
\hive-examples”目录下的样例工程文件夹“hive-jdbc-example”或“hcatalog-example”。 对于“hive-jdbc-example”样例工程，还需将准备连接Hive集群配置文件获取的配置文件“core-site.xml”、“hiveclient
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
