热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

0051.CClouderaQuickStart安装配置

ClouderaQuickStart包含了大量组件,用于演示和POC应用程序

Cloudera QuickStart用于演示和POC应用程序,不建议用于生产用途。包含了HBase、HDFS、Hive、Hue、Impala、Key-Value Store Indexer、Oozie、Solr、Spark、Sqoop 1 client、Sqoop 2、YARN、Zookeeper组件,还可以进行安装其它自带组件、进行Kerberos加密等操作。

1.现状

官方目前不提供下载,自动5.14.X已经停止提供。

打开提示连接跳转到:

https://www.cloudera.com/downloads/cdp-private-cloud-trial.html,需要进行CDP试用安装。

2. 来自远古的召唤-官方下载

通过官方遗迹直接下载,下面释放2个链接。[2021-06-08]有效。

CDH5.5.0(4.58G)

    wget https://downloads.cloudera.com/demo_vm/vmware/cloudera-quickstart-vm-5.5.0-0-vmware.zip

    CDH5.13.0(5.36G)-最后的Cloudera QuickStart版本

      wget https://downloads.cloudera.com/demo_vm/vmware/cloudera-quickstart-vm-5.13.0-0-vmware.zip

      低版本官方文档还存在:

        https://docs.cloudera.com/documentation/enterprise/5-12-x/topics/cloudera_quickstart_vm.html

        3. 环境说明

        官方资源需求摘录:

        建议至少8G内存/2个虚拟CPU;

        使用VM Workstation 8以上;

        OS登录用户:clodera/cloudera(default)、root/cloudera

        CM登录用户: cloudera/cloudera(default)、admin/admin

        MySQL登录用户:root/cloudera

        此环境默认已经安装相应Hadoop组件

        安装了Cloudera Manager

        默认已经关闭防火墙和selinux

        建议虚拟机选用仅主机/NAT网络模式

        4. 如何使用

        解压缩,使用vmware-workstation打开;

        开机默认dhcp,网卡可能会由eth0变为eth1,需要更改70-net*,删除eth0配置项,将eth1更改为eth0,然后重启主机;

        开机默认启动服务,进入cm界面,需手动启动cm和组件;

        组件启动不成功,查看主机状态,ntp存在时钟偏差,需停止组件和cm,停止服务,更改时区,然后重启服务。

        1)停止服务

          [cloudera@quickstart ~]$ chkconfig --list | grep cloudera
          cloudera-quickstart-init 0:off 1:off 2:on 3:on 4:on 5:on 6:off
          cloudera-scm-agent 0:off 1:off 2:on 3:on 4:on 5:on 6:off
          cloudera-scm-server 0:off 1:off 2:on 3:on 4:on 5:on 6:off
          [cloudera@quickstart ~]$ sudo service cloudera-scm-agent stop
          Stopping cloudera-scm-agent: [ OK ]
          [cloudera@quickstart ~]$ sudo service cloudera-scm-server stop
          Stopping cloudera-scm-server: [ OK ]
          [cloudera@quickstart ~]$ sudo service mysqld stop
          Stopping mysqld: [ OK ]

          2)更改时区

            alias cp='cp'
            echo 'ZOnE="Asia/Shanghai"' > etc/sysconfig/clock
            cp usr/share/zoneinfo/Asia/Shanghai etc/localtime
            ntpdate ntp7.aliyun.com

            3)时间同步配置-使用本地同步

              vi etc/ntp.conf
              #server 0.centos.pool.ntp.org iburst
              #server 1.centos.pool.ntp.org iburst
              #server 2.centos.pool.ntp.org iburst
              #server 3.centos.pool.ntp.org iburst
              server 127.127.1.0
              fudge 127.127.1.0 stratum 10

              重启服务

                service ntpd restart

                同步时间

                  ntpdate ntp.aliyun.com

                  检查同步

                    ntpdc -np

                    4)启动服务

                      [root@quickstart ~]# service mysqld start
                      Starting mysqld: [ OK ]
                      [root@quickstart ~]# service cloudera-scm-server start
                      Starting cloudera-scm-server: [ OK ]
                      [root@quickstart ~]# service cloudera-scm-agent start
                      Starting cloudera-scm-agent: [ OK ]
                      [root@quickstart ~]#

                        [cloudera@quickstart ~]$ sudo /home/cloudera/cloudera-manager --force --enterprise  #重启为企业版,桌面也有快捷方式
                        OR
                        [cloudera@quickstart ~]$ sudo /home/cloudera/cloudera-manager --force --express    #重启为express版,桌面也有快捷方式


                        5) 登录

                          http://quickstart.cloudera:7180
                          Username: cloudera
                          Password: cloudera


                          6) 手动启动CM和各组件

                          注:windows机器登录,CM界面可显示中文。

                          --  完  --

                          作者:王坤,微信公众号:rundba,欢迎转载,转载请注明出处。

                          如需公众号转发,请联系wx:landnow。




                          推荐阅读
                          • 分布式开源任务调度框架 TBSchedule 深度解析与应用实践
                            本文深入解析了分布式开源任务调度框架 TBSchedule 的核心原理与应用场景,并通过实际案例详细介绍了其部署与使用方法。首先,从源码下载开始,详细阐述了 TBSchedule 的安装步骤和配置要点。接着,探讨了该框架在大规模分布式环境中的性能优化策略,以及如何通过灵活的任务调度机制提升系统效率。最后,结合具体实例,展示了 TBSchedule 在实际项目中的应用效果,为开发者提供了宝贵的实践经验。 ... [详细]
                          • 如何将TS文件转换为M3U8直播流:HLS与M3U8格式详解
                            在视频传输领域,MP4虽然常见,但在直播场景中直接使用MP4格式存在诸多问题。例如,MP4文件的头部信息(如ftyp、moov)较大,导致初始加载时间较长,影响用户体验。相比之下,HLS(HTTP Live Streaming)协议及其M3U8格式更具优势。HLS通过将视频切分成多个小片段,并生成一个M3U8播放列表文件,实现低延迟和高稳定性。本文详细介绍了如何将TS文件转换为M3U8直播流,包括技术原理和具体操作步骤,帮助读者更好地理解和应用这一技术。 ... [详细]
                          • 【并发编程】全面解析 Java 内存模型,一篇文章带你彻底掌握
                            本文深入解析了 Java 内存模型(JMM),从基础概念到高级特性进行全面讲解,帮助读者彻底掌握 JMM 的核心原理和应用技巧。通过详细分析内存可见性、原子性和有序性等问题,结合实际代码示例,使开发者能够更好地理解和优化多线程并发程序。 ... [详细]
                          • 2019年后蚂蚁集团与拼多多面试经验详述与深度剖析
                            2019年后蚂蚁集团与拼多多面试经验详述与深度剖析 ... [详细]
                          • eureka out of service(eureka服务下线感知)
                            近日,知名服务注册与服务发现工具Eureka的GitHubWiki上显示其2.0版本的开源工作已经停止。关于第二篇,我想说,这是在造谣。看起来挺吓人的。关于Eureka ... [详细]
                          • APMpinpoint(分布式集群环境下的性能监控)
                            [官方参考](https:github.comnaverpinpointblobmasterdocinstallation.md”pinpoint官方文档”)中文文档参考环境要求: ... [详细]
                          • IOS Run loop详解
                            为什么80%的码农都做不了架构师?转自http:blog.csdn.netztp800201articledetails9240913感谢作者分享Objecti ... [详细]
                          • 解决Only fullscreen opaque activities can request orientation错误的方法
                            本文介绍了在使用PictureSelectorLight第三方框架时遇到的Only fullscreen opaque activities can request orientation错误,并提供了一种有效的解决方案。 ... [详细]
                          • Unity与MySQL连接过程中出现的新挑战及解决方案探析 ... [详细]
                          • 深入探索HTTP协议的学习与实践
                            在初次访问某个网站时,由于本地没有缓存,服务器会返回一个200状态码的响应,并在响应头中设置Etag和Last-Modified等缓存控制字段。这些字段用于后续请求时验证资源是否已更新,从而提高页面加载速度和减少带宽消耗。本文将深入探讨HTTP缓存机制及其在实际应用中的优化策略,帮助读者更好地理解和运用HTTP协议。 ... [详细]
                          • 在iOS开发中,基于HTTPS协议的安全网络请求实现至关重要。HTTPS(全称:HyperText Transfer Protocol over Secure Socket Layer)是一种旨在提供安全通信的HTTP扩展,通过SSL/TLS加密技术确保数据传输的安全性和隐私性。本文将详细介绍如何在iOS应用中实现安全的HTTPS网络请求,包括证书验证、SSL握手过程以及常见安全问题的解决方法。 ... [详细]
                          • Cosmos生态系统为何迅速崛起,波卡作为跨链巨头应如何应对挑战?
                            Cosmos生态系统为何迅速崛起,波卡作为跨链巨头应如何应对挑战? ... [详细]
                          • 在 CentOS 6.5 系统上部署 VNC 服务器的详细步骤与配置指南
                            在 CentOS 6.5 系统上部署 VNC 服务器时,首先需要确认 VNC 服务是否已安装。通常情况下,VNC 服务默认未安装。可以通过运行特定的查询命令来检查其安装状态。如果查询结果为空,则表明 VNC 服务尚未安装,需进行手动安装。此外,建议在安装前确保系统的软件包管理器已更新至最新版本,以避免兼容性问题。 ... [详细]
                          • 1、概述hdfs文件系统主要设计为了存储大文件的文件系统;如果有个TB级别的文件,我们该怎么存储呢?分布式文件系统未出现的时候࿰ ... [详细]
                          • RN即ReactNative基于React框架针对移动端的跨平台框架,在学习RN前建议最好熟悉下html,css,js,当然如果比较急,那就直接上手吧,毕竟用学习前面基础的时间,R ... [详细]
                          author-avatar
                          小钕孓jiao_803
                          这个家伙很懒,什么也没留下!
                          PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
                          Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有