准备Kudu应用开发环境-华为云

MAPREDUCE服务 MRS-准备本地应用开发环境:准备运行环境

准备运行环境进行应用开发时，需要同时准备代码的运行调测的Linux环境，用于验证应用程序运行正常。在节点中安装客户端，例如客户端安装目录为“/opt/client”。客户端机器的时间与集群的时间要保持一致，时间差小于5分钟。集群的Master节点或者Core节点已默认安装好客户端，可直接使用， MRS 集群外客户端的安装操作可参考集群外节点使用MRS客户端。登录 FusionInsight Manager页面，下载集群客户端软件包至主管理节点并解压，然后以root用户登录主管理节点，进入集群客户端解压路径下，复制“FusionInsight_Cluster_1_Services_ClientConfig/Kudu/config”路径下的所有配置文件至客户端节点，放置到与准备放置编译出的jar包同目录的“conf”目录下，用于后续调测，例如“/opt/client/conf”。准备开发用户时获取的keytab文件也放置于该目录下，主要配置文件说明如表2所示。例如客户端软件包为“FusionInsight_Cluster_1_Services_Client.tar”，下载路径为主管理节点的“/tmp/FusionInsight-Client”： cd /tmp/FusionInsight-Client tar -xvf FusionInsight_Cluster_1_Services_Client.tar tar -xvf FusionInsight_Cluster_1_Services_ClientConfig.tar cd FusionInsight_Cluster_1_Services_ClientConfig scp Kudu/config/* root@客户端节点IP地址:/opt/client/conf 表2 配置文件文件名称作用 user.keytab 对于Kerberos安全认证提供用户信息。 krb5.conf Kerberos Server配置信息。检查客户端节点网络连接。在安装客户端过程中，系统会自动配置客户端节点“hosts”文件，建议检查“/etc/hosts”文件内是否包含集群内节点的主机名信息，如未包含，需要手动复制解压目录下的“hosts”文件中的内容到客户端所在节点的hosts文件中，确保本地机器能与集群各主机在网络上互通。

MAPREDUCE服务 MRS 准备Kudu应用开发环境

MAPREDUCE服务 MRS-准备本地应用开发环境:准备开发环境

准备开发环境在进行应用开发时，要准备的开发和运行环境如表1所示。表1 开发环境准备项说明操作系统开发环境：Windows系统，支持Windows7以上版本。运行环境： Linux系统。如需在本地调测程序，运行环境需要和集群业务平面网络互通。安装JDK 开发和运行环境的基本配置。版本要求如下：服务端和客户端仅支持自带的OpenJDK，版本为1.8.0_242，不允许替换。对于客户应用需引用SDK类的Jar包运行在客户应用进程中的。 X86客户端：Oracle JDK，支持1.8版本。 TaiShan客户端：OpenJDK，支持1.8.0_242版本。说明：基于安全考虑，服务端只支持TLS V1.2及以上的加密协议。安装和配置IntelliJ IDEA 开发环境的基本配置，建议使用2019.1或其他兼容版本。说明：若使用Oracle JDK，请确保IntelliJ IDEA中的JDK配置为Oracle JDK。若使用Open JDK，请确保IntelliJ IDEA中的JDK配置为Open JDK。不同的IntelliJ IDEA不要使用相同的workspace和相同路径下的示例工程。安装Maven 开发环境的基本配置。用于项目管理，贯穿软件开发生命周期。准备开发用户参考准备MRS应用开发用户进行操作，准备用于应用开发的集群用户并授予相应权限。 7-zip 用于解压“*.zip”和“*.rar”文件，支持7-zip 16.04版本。

MAPREDUCE服务 MRS 准备Kudu应用开发环境

MAPREDUCE服务 MRS-准备本地应用开发环境:准备运行环境

准备运行环境进行应用开发时，需要同时准备代码的运行调测的Linux环境，用于验证应用程序运行正常。在节点中安装客户端，例如客户端安装目录为“/opt/client”。客户端机器的时间与集群的时间要保持一致，时间差小于5分钟。集群的Master节点或者Core节点已默认安装好客户端，可直接使用，MRS集群外客户端的安装操作可参考集群外节点使用MRS客户端。登录FusionInsight Manager页面，下载集群客户端软件包至主管理节点并解压，然后以root用户登录主管理节点，进入集群客户端解压路径下，复制“FusionInsight_Cluster_1_Services_ClientConfig/Kudu/config”路径下的所有配置文件至客户端节点，放置到与准备放置编译出的jar包同目录的“conf”目录下，用于后续调测，例如“/opt/client/conf”。例如客户端软件包为“FusionInsight_Cluster_1_Services_Client.tar”，下载路径为主管理节点的“/tmp/FusionInsight-Client”： cd /tmp/FusionInsight-Client tar -xvf FusionInsight_Cluster_1_Services_Client.tar tar -xvf FusionInsight_Cluster_1_Services_ClientConfig.tar cd FusionInsight_Cluster_1_Services_ClientConfig scp Kudu/config/* root@客户端节点IP地址:/opt/client/conf 检查客户端节点网络连接。在安装客户端过程中，系统会自动配置客户端节点“hosts”文件，建议检查“/etc/hosts”文件内是否包含集群内节点的主机名信息，如未包含，需要手动复制解压目录下的“hosts”文件中的内容到客户端所在节点的hosts文件中，确保本地机器能与集群各主机在网络上互通。

MAPREDUCE服务 MRS 准备Kudu应用开发环境

MAPREDUCE服务 MRS-准备本地应用开发环境:准备开发环境

准备开发环境在进行应用开发时，要准备的开发和运行环境如表1所示。表1 开发环境准备项说明操作系统开发环境：Windows系统，支持Windows7以上版本。运行环境： Linux系统。如需在本地调测程序，运行环境需要和集群业务平面网络互通。安装JDK 开发和运行环境的基本配置。版本要求如下：服务端和客户端仅支持自带的OpenJDK，版本为1.8.0_242，不允许替换。对于客户应用需引用SDK类的Jar包运行在客户应用进程中的。 X86客户端：Oracle JDK，支持1.8版本。 TaiShan客户端：OpenJDK，支持1.8.0_242版本。说明：基于安全考虑，服务端只支持TLS V1.2及以上的加密协议。安装和配置IntelliJ IDEA 开发环境的基本配置，建议使用2019.1或其他兼容版本。说明：若使用Oracle JDK，请确保IntelliJ IDEA中的JDK配置为Oracle JDK。若使用Open JDK，请确保IntelliJ IDEA中的JDK配置为Open JDK。不同的IntelliJ IDEA不要使用相同的workspace和相同路径下的示例工程。安装Maven 开发环境的基本配置。用于项目管理，贯穿软件开发生命周期。 7-zip 用于解压“*.zip”和“*.rar”文件，支持7-zip 16.04版本。

MAPREDUCE服务 MRS 准备Kudu应用开发环境

MAPREDUCE服务 MRS-准备Kudu应用安全认证:场景说明

场景说明访问安全集群环境中的服务，需要先通过Kerberos安全认证。所以Kudu应用程序中需要有安全认证代码，确保Kudu程序能够正常运行。安全认证有两种方式：命令行认证：提交Kudu应用程序运行前，在Kudu客户端执行如下命令进行认证。 kinit 组件业务用户该方式仅适用于Linux操作系统，且安装了Kudu的客户端。代码认证：通过获取客户端的principal配置文件和keytab文件进行认证。

MAPREDUCE服务 MRS 准备Kudu应用开发环境

云服务器内容精选

准备Kudu应用开发环境

7*24

备案

专业服务

退订

建议反馈

售前咨询热线