热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

2.7、CDH搭建Hadoop在安装(使用向导设置群集)

步骤7:使用向导设置群集完成“群集安装”向导后,“群集设置”向导将自动启动。以下部分将指导您完成向导的每个页面:选择服务
步骤7:使用向导设置群集
Step 2: Install Java Step 3: Install Cloudera Manager Server Step 4: Install Databases Step 5: Set Up the Cloudera Manager Database Step 6: Install CDH and Other Software Step 7: Set Up a Cluster

完成“ 群集安装”向导后,“ 群集设置”向导将自动启动。以下部分将指导您完成向导的每个页面:

 

选择服务

“ 选择服务”页面允许您选择要安装和配置的服务。确保您具有要使用的服务的相应许可证密钥。您可以选择:

  • 核心Hadoop(Core Hadoop)
    HDFS,YARN(包含MapReduce 2),ZooKeeper,Oozie,Hive和Hue
  • 核心与HBase(Core with HBase)
    HDFS,YARN(包含MapReduce 2),ZooKeeper,Oozie,Hive,Hue和HBase
  • Impala核心(Core with Impala)

    HDFS,YARN(包含MapReduce 2),ZooKeeper,Oozie,Hive,Hue和Impala

  • 核心与搜索(Core with Search)

    HDFS,YARN(包含MapReduce 2),ZooKeeper,Oozie,Hive,Hue和Solr

  • 核心与Spark(Core with Spark)

    HDFS,YARN(包括MapReduce 2),ZooKeeper,Oozie,Hive,Hue和Spark

  • 所有服务(All Services)
    HDFS,YARN(包括MapReduce 2),ZooKeeper,Oozie,Hive,Hue,HBase,Impala,Solr,Spark和Key-Value Store Indexer
  • 定制服务(Custom Services)

    选择自己的服务。所选服务所需的服务将自动包含在内。初始群集设置完成后,可以添加Flume。

要包含Cloudera Navigator数据管理,请选中标记为Include Cloudera Navigator的复选框

选择要添加的服务后,单击“ 继续”显示“ 分配角色”页面。

分配角色

“ 分配角色”页面建议群集中主机的角色分配。您可以单击角色的主机名以选择其他主机。您还可以单击“ 按主机查看”按钮以查看分配给主机的所有角色。

要查看建议的角色分配,请参阅建议的群集主机和角色分配

为服务分配所有角色后,单击“ 继续”显示“ 安装数据库”页面

设置数据库

在“ 设置数据库”页面上,您可以输入在步骤4:安装和配置数据库中创建的数据库名称,用户名和密码

选择数据库类型,然后输入每个服务的数据库名称,用户名和密码。单击“ 测试连接”以验证设置。如果连接成功,则会在每个服务旁边显示绿色复选标记和“ 成功 ”字样如果有任何问题,则会在无法连接的服务旁边报告错误。

验证每个连接是否成功后,单击继续显示“ 审阅更改”页面。

查看更改

查看更改页面列出了默认和建议设置好配置参数,包括数据目录。

警告: 不要将DataNode数据目录放在NAS设备上。调整NAS大小时,可以删除块副本,从而导致丢失块。

查看并进行必要的更改,然后单击“ 继续”显示“ 首次运行命令”页面。

首次运行命令

首次运行命令页列出的细节首次运行命令。您可以展开运行命令以查看任何步骤的详细信息,包括日志文件和命令输出。您可以通过选择“ 显示所有步骤”“仅显示失败的步骤 ”或“ 显示运行步骤”来筛选视图

首次运行命令完成后,点击继续

恭喜!

恭喜!页面报告设置向导的成功。单击“ 完成”以完成向导。安装完成。

Cloudera建议您通过单击主屏幕右上角的登录用户名并单击“  更改密码” 来尽快更改默认密码

推荐阅读
  • 一、Hadoop来历Hadoop的思想来源于Google在做搜索引擎的时候出现一个很大的问题就是这么多网页我如何才能以最快的速度来搜索到,由于这个问题Google发明 ... [详细]
  • Hadoop 2.6 主要由 HDFS 和 YARN 两大部分组成,其中 YARN 包含了运行在 ResourceManager 的 JVM 中的组件以及在 NodeManager 中运行的部分。本文深入探讨了 Hadoop 2.6 日志文件的解析方法,并详细介绍了 MapReduce 日志管理的最佳实践,旨在帮助用户更好地理解和优化日志处理流程,提高系统运维效率。 ... [详细]
  • 分布式开源任务调度框架 TBSchedule 深度解析与应用实践
    本文深入解析了分布式开源任务调度框架 TBSchedule 的核心原理与应用场景,并通过实际案例详细介绍了其部署与使用方法。首先,从源码下载开始,详细阐述了 TBSchedule 的安装步骤和配置要点。接着,探讨了该框架在大规模分布式环境中的性能优化策略,以及如何通过灵活的任务调度机制提升系统效率。最后,结合具体实例,展示了 TBSchedule 在实际项目中的应用效果,为开发者提供了宝贵的实践经验。 ... [详细]
  • PHP中元素的计量单位是什么? ... [详细]
  • 1、概述hdfs文件系统主要设计为了存储大文件的文件系统;如果有个TB级别的文件,我们该怎么存储呢?分布式文件系统未出现的时候࿰ ... [详细]
  • 本文详细介绍了 PHP 中对象的生命周期、内存管理和魔术方法的使用,包括对象的自动销毁、析构函数的作用以及各种魔术方法的具体应用场景。 ... [详细]
  • 开机自启动的几种方式
    0x01快速自启动目录快速启动目录自启动方式源于Windows中的一个目录,这个目录一般叫启动或者Startup。位于该目录下的PE文件会在开机后进行自启动 ... [详细]
  • 第二章:Kafka基础入门与核心概念解析
    本章节主要介绍了Kafka的基本概念及其核心特性。Kafka是一种分布式消息发布和订阅系统,以其卓越的性能和高吞吐量而著称。最初,Kafka被设计用于LinkedIn的活动流和运营数据处理,旨在高效地管理和传输大规模的数据流。这些数据主要包括用户活动记录、系统日志和其他实时信息。通过深入解析Kafka的设计原理和应用场景,读者将能够更好地理解其在现代大数据架构中的重要地位。 ... [详细]
  • 构建高可用性Spark分布式集群:大数据环境下的最佳实践
    在构建高可用性的Spark分布式集群过程中,确保所有节点之间的无密码登录是至关重要的一步。通过在每个节点上生成SSH密钥对(使用 `ssh-keygen -t rsa` 命令并保持默认设置),可以实现这一目标。此外,还需将生成的公钥分发到所有节点的 `~/.ssh/authorized_keys` 文件中,以确保节点间的无缝通信。为了进一步提升集群的稳定性和性能,建议采用负载均衡和故障恢复机制,并定期进行系统监控和维护。 ... [详细]
  • HBase在金融大数据迁移中的应用与挑战
    随着最后一台设备的下线,标志着超过10PB的HBase数据迁移项目顺利完成。目前,新的集群已在新机房稳定运行超过两个月,监控数据显示,新集群的查询响应时间显著降低,系统稳定性大幅提升。此外,数据消费的波动也变得更加平滑,整体性能得到了显著优化。 ... [详细]
  • 技术日志:深入探讨Spark Streaming与Spark SQL的融合应用
    技术日志:深入探讨Spark Streaming与Spark SQL的融合应用 ... [详细]
  • 如何提升Python处理约1GB数据集时的运行效率?
    如何提升Python处理约1GB数据集时的运行效率?本文探讨了在后端开发中使用Python处理大规模数据集的优化方法。通过分析常见的性能瓶颈,介绍了多种提高数据处理速度的技术,包括使用高效的数据结构、并行计算、内存管理和代码优化策略。此外,文章还提供了在Ubuntu环境下配置和测试这些优化方案的具体步骤,适用于从事推荐系统等领域的开发者。 ... [详细]
  • 分布式一致性算法:Paxos 的企业级实战
    一、简介首先我们这个平台是ES专题技术的分享平台,众所周知,ES是一个典型的分布式系统。在工作和学习中,我们可能都已经接触和学习过多种不同的分布式系统了,各 ... [详细]
  • 【原创】七、Hadoop 2.5.2+zookeeper高可用部署
    一、原理(四大要点)(1)保证元数据一致(edits)namenode(fsimage edits)a、NFSb、journalnodec、zk(2)只有一台namenode对外提 ... [详细]
  • hadoop3.1.2 first programdefault wordcount (Mac)
    hadoop3.1.2安装完成后的第一个实操示例程 ... [详细]
author-avatar
李2502933835
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有