该解决方案有何用途?
该方案基于对象存储服务 OBS和MapReduce服务 MRS,帮助用户在华为云上快速搭建大数据存算分离集群。MRS是一个在华为云上部署和管理Hadoop系统的服务,通过为MRS集群绑定弹性云服务器 ECS委托方式访问OBS,实现用户使用MRS集群作数据计算处理,而数据存储在OBS服务中。大数据在人们的生活中无处不在,在IoT、电子商务、金融、制造、医疗、能源和政府部门等行业均可以使用华为云MRS服务进行大数据处理。
架构描述
架构描述
-
在对象存储服务 OBS中创建一个并行文件系统,用于存储数据。
-
在统一身份认证服务 IAM创建一个委托,将帐号Region内对象存储服务 OBS操作权限委托给弹性云服务器 ECS。
-
使用MapReduce服务 MRS的集群作为数据计算处理。