MAPREDUCE服务 MRS-MRS组件应用开发简介:MRS组件应用开发流程说明
MRS 组件应用开发流程说明
通常MRS组件应用开发流程如下所示,各组件应用的开发编译操作可参考组件开发指南对应章节。
阶段 |
说明 |
---|---|
准备开发环境 |
在进行应用开发前,需首先准备开发环境,推荐使用IntelliJ IDEA工具,同时本地需完成JDK、Maven等初始配置。 |
准备连接集群配置文件 |
应用程序开发或运行过程中,需通过集群相关配置文件信息连接MRS集群,配置文件通常包括用于安全认证的用户文件,可从已创建好的MRS集群中获取相关内容。 用于程序调测或运行的节点,需要与MRS集群内节点网络互通。 |
配置并导入样例工程 |
MRS提供了不同组件场景下的多种样例程序,用户可获取样例工程并导入本地开发环境中进行程序学习。 |
配置安全认证 |
连接开启了Kerberos认证的MRS集群时,应用程序中需配置具有相关资源访问权限的用户进行安全认证。 |
根据业务场景开发程序 |
根据实际业务场景开发程序,调用组件接口实现对应功能。 |
编译并运行程序 |
将开发好的程序编译运行,用户可在本地Windows开发环境中进行程序调测运行,也可以将程序编译为Jar包后,提交到Linux节点上运行。 |
- MapReduce服务_如何使用MapReduce服务_MRS集群客户端安装与使用
- MapReduce服务_什么是Loader_如何使用Loader
- ModelArts开发环境_开发环境简介_开发环境怎么使用
- MapReduce服务_什么是存算分离_如何配置MRS集群存算分离
- RPA 技术_RPA技术应用_RPA适用于哪些流程的开发
- MapReduce工作原理_MapReduce是什么意思_MapReduce流程_MRS_华为云
- MapReduce服务_什么是Flume_如何使用Flume
- MapReduce服务_什么是Hue_如何使用Hue
- MapReduce服务_什么是Flink_如何使用Flink
- 数据备份归档在哪里_数据分析存储系统_大数据存储管理