Hive工作原理

Hive工作原理,如上图,我们不讲右边的hadoop阶段,我们只讲左边hive阶段的流程:
. 用户提交查询等任务给Driver。

2. 编译器获得该用户的任务Plan。

3. 编译器Compiler根据用户任务去MetaStore中获取需要的Hive的元数据信息。

4. 编译器Compiler得到元数据信息&＃xff0c;对任务进行编译&＃xff0c;先将HiveQL转换为抽象语法树&＃xff0c;然后将抽象语法树转换成查询块&＃xff0c;将查询块转化为逻辑的查询计划&＃xff0c;重写逻辑查询计划&＃xff0c;将逻辑计划转化为物理的计划&＃xff08;MapReduce&＃xff09;, 最后选择最佳的策略。

5. 将最终的计划提交给Driver。

   Driver将计划Plan转交给ExecutionEngine去执行&＃xff0c;获取元数据信息&＃xff0c;提交给JobTracker或者SourceManager执行该任务&＃xff0c;任务会直接读取HDFS中文件进行相应的操作。

6. 获取执行的结果。

7. 取得并返回执行结果。