热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

0051.CClouderaQuickStart安装配置

ClouderaQuickStart包含了大量组件,用于演示和POC应用程序

Cloudera QuickStart用于演示和POC应用程序,不建议用于生产用途。包含了HBase、HDFS、Hive、Hue、Impala、Key-Value Store Indexer、Oozie、Solr、Spark、Sqoop 1 client、Sqoop 2、YARN、Zookeeper组件,还可以进行安装其它自带组件、进行Kerberos加密等操作。

1.现状

官方目前不提供下载,自动5.14.X已经停止提供。

打开提示连接跳转到:

https://www.cloudera.com/downloads/cdp-private-cloud-trial.html,需要进行CDP试用安装。

2. 来自远古的召唤-官方下载

通过官方遗迹直接下载,下面释放2个链接。[2021-06-08]有效。

CDH5.5.0(4.58G)

    wget https://downloads.cloudera.com/demo_vm/vmware/cloudera-quickstart-vm-5.5.0-0-vmware.zip

    CDH5.13.0(5.36G)-最后的Cloudera QuickStart版本

      wget https://downloads.cloudera.com/demo_vm/vmware/cloudera-quickstart-vm-5.13.0-0-vmware.zip

      低版本官方文档还存在:

        https://docs.cloudera.com/documentation/enterprise/5-12-x/topics/cloudera_quickstart_vm.html

        3. 环境说明

        官方资源需求摘录:

        建议至少8G内存/2个虚拟CPU;

        使用VM Workstation 8以上;

        OS登录用户:clodera/cloudera(default)、root/cloudera

        CM登录用户: cloudera/cloudera(default)、admin/admin

        MySQL登录用户:root/cloudera

        此环境默认已经安装相应Hadoop组件

        安装了Cloudera Manager

        默认已经关闭防火墙和selinux

        建议虚拟机选用仅主机/NAT网络模式

        4. 如何使用

        解压缩,使用vmware-workstation打开;

        开机默认dhcp,网卡可能会由eth0变为eth1,需要更改70-net*,删除eth0配置项,将eth1更改为eth0,然后重启主机;

        开机默认启动服务,进入cm界面,需手动启动cm和组件;

        组件启动不成功,查看主机状态,ntp存在时钟偏差,需停止组件和cm,停止服务,更改时区,然后重启服务。

        1)停止服务

          [cloudera@quickstart ~]$ chkconfig --list | grep cloudera
          cloudera-quickstart-init 0:off 1:off 2:on 3:on 4:on 5:on 6:off
          cloudera-scm-agent 0:off 1:off 2:on 3:on 4:on 5:on 6:off
          cloudera-scm-server 0:off 1:off 2:on 3:on 4:on 5:on 6:off
          [cloudera@quickstart ~]$ sudo service cloudera-scm-agent stop
          Stopping cloudera-scm-agent: [ OK ]
          [cloudera@quickstart ~]$ sudo service cloudera-scm-server stop
          Stopping cloudera-scm-server: [ OK ]
          [cloudera@quickstart ~]$ sudo service mysqld stop
          Stopping mysqld: [ OK ]

          2)更改时区

            alias cp='cp'
            echo 'ZOnE="Asia/Shanghai"' > etc/sysconfig/clock
            cp usr/share/zoneinfo/Asia/Shanghai etc/localtime
            ntpdate ntp7.aliyun.com

            3)时间同步配置-使用本地同步

              vi etc/ntp.conf
              #server 0.centos.pool.ntp.org iburst
              #server 1.centos.pool.ntp.org iburst
              #server 2.centos.pool.ntp.org iburst
              #server 3.centos.pool.ntp.org iburst
              server 127.127.1.0
              fudge 127.127.1.0 stratum 10

              重启服务

                service ntpd restart

                同步时间

                  ntpdate ntp.aliyun.com

                  检查同步

                    ntpdc -np

                    4)启动服务

                      [root@quickstart ~]# service mysqld start
                      Starting mysqld: [ OK ]
                      [root@quickstart ~]# service cloudera-scm-server start
                      Starting cloudera-scm-server: [ OK ]
                      [root@quickstart ~]# service cloudera-scm-agent start
                      Starting cloudera-scm-agent: [ OK ]
                      [root@quickstart ~]#

                        [cloudera@quickstart ~]$ sudo /home/cloudera/cloudera-manager --force --enterprise  #重启为企业版,桌面也有快捷方式
                        OR
                        [cloudera@quickstart ~]$ sudo /home/cloudera/cloudera-manager --force --express    #重启为express版,桌面也有快捷方式


                        5) 登录

                          http://quickstart.cloudera:7180
                          Username: cloudera
                          Password: cloudera


                          6) 手动启动CM和各组件

                          注:windows机器登录,CM界面可显示中文。

                          --  完  --

                          作者:王坤,微信公众号:rundba,欢迎转载,转载请注明出处。

                          如需公众号转发,请联系wx:landnow。




                          推荐阅读
                          • 使用在线工具jsonschema2pojo根据json生成java对象
                            本文介绍了使用在线工具jsonschema2pojo根据json生成java对象的方法。通过该工具,用户只需将json字符串复制到输入框中,即可自动将其转换成java对象。该工具还能解析列表式的json数据,并将嵌套在内层的对象也解析出来。本文以请求github的api为例,展示了使用该工具的步骤和效果。 ... [详细]
                          • 本文介绍了计算机网络的定义和通信流程,包括客户端编译文件、二进制转换、三层路由设备等。同时,还介绍了计算机网络中常用的关键词,如MAC地址和IP地址。 ... [详细]
                          • Windows7 64位系统安装PLSQL Developer的步骤和注意事项
                            本文介绍了在Windows7 64位系统上安装PLSQL Developer的步骤和注意事项。首先下载并安装PLSQL Developer,注意不要安装在默认目录下。然后下载Windows 32位的oracle instant client,并解压到指定路径。最后,按照自己的喜好对解压后的文件进行命名和压缩。 ... [详细]
                          • CEPH LIO iSCSI Gateway及其使用参考文档
                            本文介绍了CEPH LIO iSCSI Gateway以及使用该网关的参考文档,包括Ceph Block Device、CEPH ISCSI GATEWAY、USING AN ISCSI GATEWAY等。同时提供了多个参考链接,详细介绍了CEPH LIO iSCSI Gateway的配置和使用方法。 ... [详细]
                          • 本文介绍了一个适用于PHP应用快速接入TRX和TRC20数字资产的开发包,该开发包支持使用自有Tron区块链节点的应用场景,也支持基于Tron官方公共API服务的轻量级部署场景。提供的功能包括生成地址、验证地址、查询余额、交易转账、查询最新区块和查询交易信息等。详细信息可参考tron-php的Github地址:https://github.com/Fenguoz/tron-php。 ... [详细]
                          • centos安装Mysql的方法及步骤详解
                            本文介绍了centos安装Mysql的两种方式:rpm方式和绿色方式安装,详细介绍了安装所需的软件包以及安装过程中的注意事项,包括检查是否安装成功的方法。通过本文,读者可以了解到在centos系统上如何正确安装Mysql。 ... [详细]
                          • Exceptioninthreadmainorg.apache.hadoop.security.AccessControlException:Permissiondenied: ... [详细]
                          • 添加商品数据Spring容器由Spring容器,来管理SolrServer将SolrServer注入Spring容器添加配置文件applicationConte ... [详细]
                          • hadoop常用操作命令https:www.cnblogs.comcerofangp10460494.htmlday3_day6https:www.cnblogs.comcerof ... [详细]
                          • 安装mysqlclient失败解决办法
                            本文介绍了在MAC系统中,使用django使用mysql数据库报错的解决办法。通过源码安装mysqlclient或将mysql_config添加到系统环境变量中,可以解决安装mysqlclient失败的问题。同时,还介绍了查看mysql安装路径和使配置文件生效的方法。 ... [详细]
                          • EPICS Archiver Appliance存储waveform记录的尝试及资源需求分析
                            本文介绍了EPICS Archiver Appliance存储waveform记录的尝试过程,并分析了其所需的资源容量。通过解决错误提示和调整内存大小,成功存储了波形数据。然后,讨论了储存环逐束团信号的意义,以及通过记录多圈的束团信号进行参数分析的可能性。波形数据的存储需求巨大,每天需要近250G,一年需要90T。然而,储存环逐束团信号具有重要意义,可以揭示出每个束团的纵向振荡频率和模式。 ... [详细]
                          • 本文介绍了九度OnlineJudge中的1002题目“Grading”的解决方法。该题目要求设计一个公平的评分过程,将每个考题分配给3个独立的专家,如果他们的评分不一致,则需要请一位裁判做出最终决定。文章详细描述了评分规则,并给出了解决该问题的程序。 ... [详细]
                          • solr进阶七:与jQuery结合的自动补全功能
                            网上有大量的jQuery自动补全功能的插件,我实现这个功能是采用网友写好的纯jQuery代码,而不是采用插件,因为特效会差很多。而后台的数据是从solr那边获取过来,通过整理,放到对象中,再放到 ... [详细]
                          • 利用SOLR搭建企业搜索平台 之——Solr索引基本操作
                            来源:http:blog.csdn.netzx13525079024articledetails25367239我们来看下通过界面来操作SOLR,包括SOLR索引的添加,查询等基本 ... [详细]
                          • kafka(一)
                            KafkaKafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的分布式消息系统,它的最 ... [详细]
                          author-avatar
                          小钕孓jiao_803
                          这个家伙很懒,什么也没留下!
                          PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
                          Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有