热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

storm基本安装

为什么80%的码农都做不了架构师?storm安装步骤:一、安装zookeeper1.全部选用CDH的产品,不用担心版本问题,省心。包

为什么80%的码农都做不了架构师?>>>   hot3.png

storm安装步骤:

一、安装zookeeper 1.全部选用CDH的产品,不用担心版本问题,省心。 包都在这里:http://archive.cloudera.com/cdh4/cdh/4/

2.配置zookeeper 解压稍微修改配置就可以使用,只需要定义dataDir和server.1/2/3

dataDir=/data/zookeeper/tmp hostname1:2888:3888 hostname2:2888:3888 hostname3:2888:3888

3.启动 ./zkServer.sh start

二、安装消息队列ZeroMQ

1.直接上最新版本zeromq-4.0.3

http://download.zeromq.org/zeromq-4.0.3.tar.gz 编译安装:./configure && make && make install && ldconfig 不要忘记ldconfig

2.安装zemq

https://github.com/zeromq/jzmq 编译安装:./configure && make && make install && ldconfig

两个模块都默认安装/usr/local/了,这样storm就不用单独配置java.library.path了

三、安装storm

1.storm需要python2.6以上版本。安装略

2.storm配置

storm.zookeeper.servers: 需要指定zookeeper集群ip storm.local.dir:本地目录位置 storm.zookeeper.root:zookeeper根目录 nimbus.host: "IP" worker.childopts:"-Xmx m" ui.port: 8080

3.启动storm

ui的机器 ./storm nimbus >/dev/null 2>&1 & work ./storm supervisor >/dev/null 2>&1 & ui ./storm ui >/dev/null 2>&1 &

要注意的是,RELEASE文件时必须的,否则启动会报错

only be run from with in a release


转:https://my.oschina.net/MaTech/blog/188080



推荐阅读
  • 离线安装Grafana Cloudera Manager插件并监控CDH集群
    本文详细介绍如何离线安装Cloudera Manager (CM) 插件,并通过Grafana监控CDH集群的健康状况和资源使用情况。该插件利用CM提供的API接口进行数据获取和展示。 ... [详细]
  • Hadoop入门与核心组件详解
    本文详细介绍了Hadoop的基础知识及其核心组件,包括HDFS、MapReduce和YARN。通过本文,读者可以全面了解Hadoop的生态系统及应用场景。 ... [详细]
  • 基于KVM的SRIOV直通配置及性能测试
    SRIOV介绍、VF直通配置,以及包转发率性能测试小慢哥的原创文章,欢迎转载目录?1.SRIOV介绍?2.环境说明?3.开启SRIOV?4.生成VF?5.VF ... [详细]
  • 本文详细探讨了HTML表单中GET和POST请求的区别,包括它们的工作原理、数据传输方式、安全性及适用场景。同时,通过实例展示了如何在Servlet中处理这两种请求。 ... [详细]
  • Hadoop发行版本选择指南:技术解析与应用实践
    本文详细介绍了Hadoop的不同发行版本及其特点,帮助读者根据实际需求选择最合适的Hadoop版本。内容涵盖Apache Hadoop、Cloudera CDH等主流版本的特性及应用场景。 ... [详细]
  • 全面解析运维监控:白盒与黑盒监控及四大黄金指标
    本文深入探讨了白盒和黑盒监控的概念,以及它们在系统监控中的应用。通过详细分析基础监控和业务监控的不同采集方法,结合四个黄金指标的解读,帮助读者更好地理解和实施有效的监控策略。 ... [详细]
  • window下kafka的安装以及测试
    目录一、安装JDK(需要安装依赖javaJDK)二、安装Kafka三、测试参考在Windows系统上安装消息队列kafka一、安装JDKÿ ... [详细]
  • Zookeeper面试常见问题解析
    本文详细介绍了Zookeeper中的ZAB协议、节点类型、ACL权限控制机制、角色分工、工作状态、Watch机制、常用客户端、分布式锁实现、默认通信框架以及消息广播和领导选举的流程。 ... [详细]
  • 本文详细介绍了 Apache ZooKeeper 的 FileTxnLog 类中的 setPreallocSize 方法,并提供了多个实际应用中的代码示例。通过这些示例,读者可以更好地理解如何在不同场景下合理设置日志文件的预分配大小。 ... [详细]
  • 2020年腾讯PCG后端开发实习生面试经历分享
    本文详细记录了2020年腾讯平台与内容事业群(PCG)后端开发实习生岗位的面试过程,包括初试和复试的主要内容和技术考察点。 ... [详细]
  • Java高级工程师学习路径及面试准备指南
    本文基于一位朋友的PDF面试经验整理,涵盖了Java高级工程师所需掌握的核心知识点,包括数据结构与算法、计算机网络、数据库、操作系统等多个方面,并提供了详细的参考资料和学习建议。 ... [详细]
  • 本文详细介绍了如何搭建和配置ZooKeeper集群,包括环境变量设置、配置文件调整、主机映射关系配置及启动验证等关键步骤。 ... [详细]
  • 使用clouderaquickstartvm无配置快速部署Hadoop应用
    http:zzj270919.blog.163.comblogstatic68997776201522561659999目录:通过CDH网站下载cloudera-vm ... [详细]
  • Flume 开源分布式日志收集系统
    为什么80%的码农都做不了架构师?Flume--开源分布式日志收集系统Flume是Cloudera提供的一个高可用的、高可靠的开源分布式海量日志收集系统 ... [详细]
  • 一、四种存储格式介绍1、TestFileTextFile文件不支持块压缩,默认格式,数据不做压缩,磁盘开销大,数据解析开销 ... [详细]
author-avatar
斌哥第一次
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有