MAPREDUCE服务 MRS-数据迁移到MRS前信息收集:待迁移的存量数据及数据量统计

时间:2024-04-16 08:56:37

待迁移的存量数据及数据量统计

如果使用HDFS作为文件存储系统,可以通过客户端执行hadoop fs -du -h HDFS文件目录命令统计路径下的文件大小。
表4 现有数据量统计

大数据组件

待迁移数据的路径

数据量大小

文件个数或表个数

HDFS/OBS(或其他文件存储系统)

/user/helloworld

XXX

总共:XXX个文件

小于2 MB的文件数量:XXX

Hive

/user/hive/warehouse/

XXX

表个数:XXX

HBase

/hbase

XXX

表个数:XXX

Region个数:XXX

support.huaweicloud.com/bestpractice-mrs/mrs_05_0027.html