MAPREDUCE服务 MRS-使用Spark2x实现车联网车主驾驶行为分析:方案架构

时间:2024-06-29 14:12:11

方案架构

本实践基于华为云 MapReduce服务 实践所编写,用于指导您了解 MRS 的基本功能,利用MRS服务的Spark2x组件,对车主的驾驶行为进行分析统计,得到用户驾驶行为的分析结果。

本实践基本内容如下所示:

  1. 创建集群:创建一个MRS 3.1.0版本不启用Kerberos认证的分析集群。
  2. 准备Spark2x样例程序和样例数据:创建OBS路径并将Spark2x样例程序和样例数据上传到该OBS路径中。
  3. 创建作业:在MRS管理控制台创建SparkSubmit作业并运行。
  4. 查看作业执行结果:作业执行完成后在OBS路径中获取日志文件并查看执行结果。
support.huaweicloud.com/bestpractice-mrs/mrs_05_0001.html