MAPREDUCE服务 MRS-Impala应用开发常用概念

时间:2024-06-29 14:11:29

Impala应用开发常用概念

  • 客户端

    客户端直接面向用户,可通过Java API、Thrift API访问服务端进行Impala的相关操作。本文中的Impala客户端特指Impala client的安装目录,里面包含通过Java API访问Impala的样例代码。

  • HiveQL语言

    Hive Query Language,类SQL语句,与Hive类似。

  • Statestore

    Statestore管理Impala集群中所有的Impalad实例的健康状态,并将实例健康信息广播到所有实例上。当某一个Impalad实例发生故障,比如节点异常、网络异常等,Statestore将通知其他Impalad实例,后续的查询请求等将不会向该实例分发。

  • Catalog

    Catalog实例服务将每个Impalad实例上发生的元数据变动同步到集群内其他Impalad实例,从而避免在一个Impalad实例中更改元数据,其他各个实例需要执行REFRESH操作来更新。但是,在Hive中建表、修改表等,则需要执行REFRESH或者INVALIDATE METADATA操作。

support.huaweicloud.com/devg3-mrs/mrs_07_120003.html