Impala核心组件与架构

核心组件
• Statestore Daemon
– 负责收集分布在集群中各个impalad进程的资源信息、各节点健康状况&＃xff0c;同步
节点信息.
– 负责query的调度

• Catalog Daemon
– 分发表的元数据信息到各个impalad中
– 接收来自statestore的所有请求

• Impala Daemon&＃xff08;最核心&＃xff09;
– 接收client、hue、jdbc或者odbc请求、Query执行并返回给中心协调节点
– 子节点上的守护进程&＃xff0c;负责向statestore保持通信&＃xff0c;汇报工作

整体架构

首先&＃xff0c;由上可知&＃xff0c;Statestore和Catalog是需要通信的&＃xff0c;所以&＃xff0c;搭建时&＃xff0c;这两个是放在一台主机上&＃xff0c;从而使之通信不需走网络请求。
执行流程&＃xff1a;客户端&＃xff08;SQL APP、ODBC&＃xff09;发送SQL请求至Query Planner,解析后送至QueryCoordinator进行负载均衡的一个调度&＃xff08;当前的QueryCoordinator将作为整个job的leader&＃xff09;&＃xff0c;分发到不同的Impalad进程&＃xff0c;并最终通过各个Query Executor来执行查询&＃xff0c;最后将执行结果送回QueryCoordinator&＃xff08;leader&＃xff09;&＃xff0c;返回给客户端。
Impalad的数据是存储在HDFS或者HBasse中&＃xff0c;所以&＃xff0c;Impalad进程与DataNode部署在一台机器上。