云采用框架-部署:大数据平台部署

时间:2025-01-21 11:51:14

大数据平台部署

大数据平台的部署可以参考如下方法:

  • 大数据集群部署

    基于架构设计的原则,云上大数据集群一般采用云服务。华为云 MRS 是一个在华为云上部署和管理Hadoop系统的服务,一键即可部署Hadoop集群。MRS提供租户完全可控的企业级大数据集群云服务,轻松运行Hadoop、Spark、HBase、Kafka等大数据组件。具体部署方法可参考MRS官网文档

  • 大数据任务调度平台部署

    如果目标架构是采用华为云的任务调度平台 DataArts Studio ,可以参考如下官网文档进行部署和配置。

    如果目标架构是采用自建的大数据任务调度平台,有2种方法部署,可以基于华为云E CS 重新部署大数据任务调度软件,或者是使用华为云 SMS 工具将源端调度平台迁移到华为云ECS。

  • 大数据应用部署

    大数据应用的部署有2种方法,可以基于华为云ECS重新部署大数据应用,或者是使用华为云SMS工具将大数据应用迁移到华为云ECS。

support.huaweicloud.com/usermanual-caf/caf_01_0171.html