MAPREDUCE服务 MRS-Datasource表优化:操作场景

时间:2024-06-29 16:25:21

操作场景

将datasource表的分区消息存储到Metastore中,并在Metastore中对分区消息进行处理。

  • 优化datasource表,支持对表中分区执行增加、删除和修改等语法,从而增加与Hive的兼容性。
  • 支持在查询语句中,把分区裁剪并下压到Metastore上,从而过滤掉不匹配的分区。
    示例如下:
    select count(*) from table where partCol=1;    //partCol列为分区列

    此时,在物理计划中执行TableScan操作时,只处理分区(partCol=1)对应的数据。

support.huaweicloud.com/cmpntguide-mrs/mrs_01_1997.html