热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

开发笔记:hbase集群配置

本文由编程笔记#小编为大家整理,主要介绍了hbase集群配置相关的知识,希望对你有一定的参考价值。说明安装
本文由编程笔记#小编为大家整理,主要介绍了hbase集群配置相关的知识,希望对你有一定的参考价值。




  • 说明

  • 安装

  • 配置

  • 启动

  • 网页效果

  • 一点废话


    本文介绍hbase集群配置




说明

hbase想正确配置成功的前提是,你必须知道hadoop集群和zookeeper集群是如何配置的

安装

下载地址 http://mirror.bit.edu.cn/apache/hbase/2.1.1/
tar -zxvf hbase-2.1.1-bin.tar.gz 解压
mv hbase-2.1.1 hbase 换名
配置环境变量
sudo vim /etc/profile
添加
export HBASE_HOME=/usr/local/hbase
export PATH=$HBASE_HOME/bin:$PATH
source /etc/profile 使文件生效

配置



  1. hosts

    sudo vim /etc/hosts
    添加
    192.168.76.128 master
    192.168.76.129 worker1
    192.168.76.130 worker2
    192.168.76.131 worker3


  2. hbase-env.sh

    sudo vim hbase-env.sh
    添加如下配置
    export JAVA_HOME=/usr/src/jdk-11.0.1
    export HBASE_OPTS="-XX:+UseConcMarkSweepGC"
    export HBASE_MANAGES_ZK=false


  3. regionservers

    配置从节点
    sudo vim regionservers
    添加
    worker1
    worker2
    worker3


  4. hbase-site.xml

    sudo vim hbase-site.xml
    添加

    hbase.master
    master:60000


    hbase.master.maxclockskew
    180000


    hbase.rootdir
    hdfs://master:9000/hbase


    hbase.cluster.distributed
    true


    hbase.zookeeper.quorum
    worker1,worker2,worker3


    hbase.zookeeper.property.clientPort
    2182


    hbase.zookeeper.property.dataDir
    /usr/local/tmpdata/zookeeper


    hbase.unsafe.stream.capability.enforce
    false


  5. core-site.xml

    将此文件放置于conf目录下




    fs.defaultFS
    viewfs:///


    fs.viewfs.mounttable.default.link./tmp
    hdfs://master


  6. hdfs-site.xml

    将此文件放置于conf目录下




    dfs.replication
    2


    dfs.nameservices
    master


    dfs.ha.namenodes.master
    nn1


    dfs.namenode.rpc-address.master.nn1
    master:9000


    dfs.namenode.http-address.master.nn1
    master:50070



启动

1. 安装hadoop集群 -> 请参考我的文章 https://www.cnblogs.com/ye-hcj/p/10192857.html,启动hadoop集群
2. 启动zookeeper集群 -> 在 worker1 worker2 worker3 下分别运行 hbase-daemon.sh start zookeeper
3. 在master中运行 start-hbase.sh 即可
4. 访问http://master:16010/master-status

网页效果

技术分享图片


一点废话

这篇文章是我学习it技术中目前遇到的最困难的一个,光配置这个hbase环境,足足折腾了我一个礼拜,不得不说百度,谷歌这些网站缺乏足够正确的文章
期间真的都想放弃学习了,在这里写这些,无非是提醒自己,再困难的事情慢慢的都会解决,并且以负责任的态度对待我每一篇文章
各位如果有任何疑问欢迎在下方留言,我会尽我所能。。。


推荐阅读
  • 在Java Web服务开发中,Apache CXF 和 Axis2 是两个广泛使用的框架。CXF 由于其与 Spring 框架的无缝集成能力,以及更简便的部署方式,成为了许多开发者的首选。本文将详细介绍如何使用 CXF 框架进行 Web 服务的开发,包括环境搭建、服务发布和客户端调用等关键步骤,为开发者提供一个全面的实践指南。 ... [详细]
  • 本文深入解析了通过JDBC实现ActiveMQ消息持久化的机制。JDBC能够将消息可靠地存储在多种关系型数据库中,如MySQL、SQL Server、Oracle和DB2等。采用JDBC持久化方式时,数据库会自动生成三个关键表:`activemq_msgs`、`activemq_lock`和`activemq_ACKS`,分别用于存储消息数据、锁定信息和确认状态。这种机制不仅提高了消息的可靠性,还增强了系统的可扩展性和容错能力。 ... [详细]
  • 本文探讨了 Kafka 集群的高效部署与优化策略。首先介绍了 Kafka 的下载与安装步骤,包括从官方网站获取最新版本的压缩包并进行解压。随后详细讨论了集群配置的最佳实践,涵盖节点选择、网络优化和性能调优等方面,旨在提升系统的稳定性和处理能力。此外,还提供了常见的故障排查方法和监控方案,帮助运维人员更好地管理和维护 Kafka 集群。 ... [详细]
  • Spring – Bean Life Cycle
    Spring – Bean Life Cycle ... [详细]
  • javascript分页类支持页码格式
    前端时间因为项目需要,要对一个产品下所有的附属图片进行分页显示,没考虑ajax一张张请求,所以干脆一次性全部把图片out,然 ... [详细]
  • 在 Ubuntu 中遇到 Samba 服务器故障时,尝试卸载并重新安装 Samba 发现配置文件未重新生成。本文介绍了解决该问题的方法。 ... [详细]
  • 在PHP中如何正确调用JavaScript变量及定义PHP变量的方法详解 ... [详细]
  • SecureCRT是一款功能强大的终端仿真软件,支持SSH1和SSH2协议,适用于在Windows环境下高效连接和管理Linux服务器。该工具不仅提供了稳定的连接性能,还具备丰富的配置选项,能够满足不同用户的需求。通过SecureCRT,用户可以轻松实现对远程Linux系统的安全访问和操作。 ... [详细]
  • Java Socket 关键参数详解与优化建议
    Java Socket 的 API 虽然被广泛使用,但其关键参数的用途却鲜为人知。本文详细解析了 Java Socket 中的重要参数,如 backlog 参数,它用于控制服务器等待连接请求的队列长度。此外,还探讨了其他参数如 SO_TIMEOUT、SO_REUSEADDR 等的配置方法及其对性能的影响,并提供了优化建议,帮助开发者提升网络通信的稳定性和效率。 ... [详细]
  • 本文介绍了如何利用Struts1框架构建一个简易的四则运算计算器。通过采用DispatchAction来处理不同类型的计算请求,并使用动态Form来优化开发流程,确保代码的简洁性和可维护性。同时,系统提供了用户友好的错误提示,以增强用户体验。 ... [详细]
  • 本文深入探讨了如何利用Maven高效管理项目中的外部依赖库。通过介绍Maven的官方依赖搜索地址(),详细讲解了依赖库的添加、版本管理和冲突解决等关键操作。此外,还提供了实用的配置示例和最佳实践,帮助开发者优化项目构建流程,提高开发效率。 ... [详细]
  • 本文详细介绍了一种利用 ESP8266 01S 模块构建 Web 服务器的成功实践方案。通过具体的代码示例和详细的步骤说明,帮助读者快速掌握该模块的使用方法。在疫情期间,作者重新审视并研究了这一未被充分利用的模块,最终成功实现了 Web 服务器的功能。本文不仅提供了完整的代码实现,还涵盖了调试过程中遇到的常见问题及其解决方法,为初学者提供了宝贵的参考。 ... [详细]
  • Presto:高效即席查询引擎的深度解析与应用
    本文深入解析了Presto这一高效的即席查询引擎,详细探讨了其架构设计及其优缺点。Presto通过内存到内存的数据处理方式,显著提升了查询性能,相比传统的MapReduce查询,不仅减少了数据传输的延迟,还提高了查询的准确性和效率。然而,Presto在大规模数据处理和容错机制方面仍存在一定的局限性。本文还介绍了Presto在实际应用中的多种场景,展示了其在大数据分析领域的强大潜力。 ... [详细]
  • 在CentOS系统中部署与配置ZooKeeper详解 ... [详细]
  • 如何在PHP中正确配置错误显示功能
    在PHP中正确配置错误显示功能的方法如下:首先,定位并打开“php.ini”配置文件;接着,将“display_errors”参数设置为“On”;最后,在PHP代码文件的顶部添加 `ini_set('display_errors', '1');` 以确保错误信息能够被正确显示。此外,建议在开发环境中启用此功能,而在生产环境中禁用,以避免敏感信息泄露。 ... [详细]
author-avatar
李淑茹韦雯
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有