热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

cdhhueimpala

hue英[hjuː]n.色彩;色度;色调;叫声 oozie['uːzɪ](缅甸的)驯象人,驭象者Hue是一个开源的ApacheHadoopUI系统。通过使用Hue我们可以

hue
英 [hjuː]
n. 色彩;色度;色调;叫声

 

oozie
['uːzɪ]
(缅甸的)驯象人,驭象者

Hue是一个开源的Apache Hadoop UI系统。
通过使用Hue我们可以在浏览器端的Web控制台上与Hadoop集群进行交互来分析处理数据。
例如操作HDFS上的数据、运行Hive脚本、管理Oozie任务等等。
是基于Python Web框架Django实现的。
支持任何版本Hadoop
基于文件浏览器(File Browser)访问HDFS
基于web编辑器来开发和运行Hive查询
支持基于Solr进行搜索的应用,并提供可视化的数据视图,报表生成
通过web调试和开发impala交互式查询
spark调试和开发
Pig开发和调试
oozie任务的开发,监控,和工作流协调调度
Hbase数据查询和修改,数据展示
Hive的元数据(metastore)查询
MapReduce任务进度查看,日志追踪
创建和提交MapReduce,Streaming,Java job任务
Sqoop2的开发和调试
Zookeeper的浏览和编辑
数据库(MySQL,PostGres,SQlite,Oracle)的查询和展示

 

调度系统:
作业输入输出有依赖;A执行完成再给信号给B

  

添加hue服务。先添加依赖的服务oozie.
mysql> create database oozie DEFAULT CHARACTER SET utf8;
mysql> grant all on oozie.* TO 'oozie'@'%' IDENTIFIED BY 'oozie';

 

 

 

 

 

 

 

 

 

 

 

Failed to create Oozie database tables.
直接返回主页启动zoozie即可。
https://blog.csdn.net/qiang0066/article/details/79214441

  

继续添加hue服务

  

 

 

 

 

进入hue服务页点击webUI

 

 

 

 

创建用户

 

 

 

点击右侧下拉创建用户

 

 

 

点击文件浏览器创建和保存文件

  

 

 

 

 

拖拽设计作业链

  

 

 

 

 

 

 

hue hive 创建表

  

 

 

 

load上传文件到hive表

  

 

 

 

 

impala
英 [ɪm'pɑːlə; -'pælə] 美
n. 黑斑羚(产于非洲中南部)
n. (Impala)人名;(意)因帕拉

  

impala 对应hive : 是基于hdfs的sql执行引擎

  

  

 



推荐阅读
author-avatar
马里奥毛瑞尔小P
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有