MAPREDUCE服务 MRS-数据迁移到MRS前信息收集:集群基本信息收集
集群基本信息收集
参数 |
说明 |
---|---|
集群名称 |
- |
集群版本 |
|
节点数及规格 |
调研现有集群节点数和节点规格。 如果集群硬件异构,请收集多种规格和对应节点数,参见表2。 例如:
|
是否开启Kerberos认证 |
是或否 |
权限控制及说明 |
调研各个开启ACL权限控制的组件和配置,通常涉及Yarn、Hive、Impala、HBase等组件。 使用Ranger、Sentry或组件开源的权限能力进行权限控制。 |
所在Region/AZ |
云上资源填写项 |
虚拟私有云 |
云上资源填写项 |
子网 |
云上资源填写项 |
安全组 |
云上资源填写项 |
节点组 |
CPU和内存信息 |
磁盘和网络(按节点组统计) |
HDFS |
Yarn |
||||
---|---|---|---|---|---|---|---|---|
- |
- |
磁盘信息(数据盘大小、磁盘IO、当前磁盘使用率和IO情况) |
网络(网卡带宽大小、网络读写速度和峰值) |
NameNode |
DataNode |
JournalNode |
NodeManager |
ResourceManager |
master1 |
(16U64G) |
- |
- |
1 |
- |
1 |
- |
1 |
master2 |
(16U64G) |
- |
- |
1 |
- |
1 |
- |
1 |
master3 |
(16U64G) |
- |
- |
- |
- |
1 |
- |
- |
Core-group1 |
(32U128G)*数量 |
- |
- |
- |
1 |
- |
1 |
- |
Core-group1 |
(32U129G) |
- |
- |
- |
- |
- |
- |
- |
Core-group1 |
(32U130G) |
- |
- |
- |
- |
- |
- |
- |
- MapReduce服务_什么是Kafka_如何使用Kafka
- MapReduce服务_如何使用MapReduce服务_MRS集群客户端安装与使用
- MapReduce服务_什么是HetuEngine_如何使用HetuEngine
- MapReduce服务_什么是存算分离_如何配置MRS集群存算分离
- 大数据分析是什么_使用MapReduce_创建MRS服务
- MapReduce服务_什么是Flume_如何使用Flume
- MapReduce服务_什么是Loader_如何使用Loader
- MapReduce服务_什么是MapReduce服务_什么是HBase
- MapReduce服务_什么是ClickHouse_如何使用ClickHouse
- MapReduce服务_什么是ZooKeeper_如何使用ZooKeeper