solr7.4.0集群搭建

注意&＃xff0c;在搭建solr集群前&＃xff0c;建议最好有一个solr服务是已经搭建好的&＃xff0c;可以简化大量重复的配置操作。

单机solr服务搭建过程参看我的这篇文章&＃xff1a;

Solr服务在Linux上的搭建详细教程

这个单机solr服务在solr集群搭建第二步和第三步里需要&＃xff0c;搭建好一个solr服务后&＃xff0c;就可以进行集群搭建了。

第一步&＃xff1a;创建四个tomcat实例。每个tomcat运行在不同的端口。8180、8280、8380、8480

上传解压步骤省略&＃xff0c;这是我解压好的

复制tomcat到之前搭建zookeeper集群第四步时&＃xff0c;创建的/usr/local/solr-cloud目录里&＃xff0c;复制4个

去solr-cloud目录&＃xff0c;发现已经复制好了4个tomcat目录

在tomcat目录下的conf里的server.xml&＃xff0c;修改每个tomcat的端口号&＃xff0c;这里只演示第一个目录的&＃xff0c;另外三个都要改&＃xff0c;端口要互不冲突

 用/port命令搜索port字符串&＃xff0c;按n搜索下一个&＃xff0c;有三个地方要改&＃xff0c;依次更改为

其他三个tomcat目录里的server.xml配置的端口按照234的顺序全改了啊&＃xff0c;具体过程这里我就不截图了。

一共要改四个文件&＃xff0c;每个文件里改三个地方&＃xff0c;这12个端口号要互不冲突

第二步&＃xff1a;把单机版的solr工程复制到集群中的tomcat中

在搭建好的单机solr服务里&＃xff08;这里是另一篇教程&＃xff0c;上面说过了&＃xff09;&＃xff0c;复制solr工程到第一步的4个tomcat目录里&＃xff0c;一共是复制4份

第三步&＃xff1a;为每个solr实例创建一个对应的solrhome。使用单机版的solrhome复制四份

一样在之前搭建的单机solr服务里&＃xff0c;把solrhome复制4份出来到solr-cloud目录里

现在solr-cloud目录里是有这些目录&＃xff0c;检查一下有没有复制错地方的&＃xff1a;

第四步&＃xff1a;配置solrCloud相关的配置。每个solrhome下都有一个solr.xml&＃xff0c;把其中的ip及端口号配置好

之前搭建单机版solr服务的时候没有动过solrhome里的这个文件&＃xff0c;现在搭建集群了&＃xff0c;需要进行修改

需要修改4个solr.xml&＃xff0c;我这里还是只演示第一个&＃xff0c;另外三个目录里的类比着改&＃xff0c;一样的&＃xff0c;就是1234的顺序

找到这个地方&＃xff0c;第一个红框代表当前节点的ip地址&＃xff0c;就是你部署这个solrhome01&＃xff0c;tomcat01集群节点的服务器ip&＃xff0c;实际工作中就是会部署4个服务器&＃xff0c;一个服务器是一个节点&＃xff0c;部署一个solr服务

第二个红框代表当前solr服务实例的端口号&＃xff0c;就是所在的tomcat的端口号&＃xff0c;就是第一步在tomcat01的server.xml里配置的8180

我的配置完后是这样的

其他三个照着改啊&＃xff0c;由于我是在一台虚拟机搭建的四个实例&＃xff0c;所以肯定四个实例的ip是一样的&＃xff0c;但端口分别是8180&＃xff0c;8280&＃xff0c;8380&＃xff0c;8480

第五步&＃xff1a;需要修改solr服务的web.xml文件。把solrhome关联起来

修改这个文件&＃xff0c;和之前单机版的solr配置是一样的

要注意的是&＃xff0c;tomcat01这里的solr服务&＃xff0c;是上面第二步复制过来的对吧&＃xff0c;是我之前用solr7搭建的单机solr服务&＃xff0c;里面的配置和solr4不太一样&＃xff0c;具体还是去文章最上面看我提供的单机solr服务搭建教程链接

找到这个&＃xff0c;这里是我之前搭建单机solr服务时&＃xff0c;配置的solrhome路径

现在改成集群的solrhome01目录&＃xff0c;使他们关联起来

其他三个tomcat里的web.xml都对应着一改&＃xff0c;solrhome02&＃xff0c;03&＃xff0c;04

第六步&＃xff1a;让zookeeper统一管理配置文件。需要把/conf目录上传到zookeeper

现在我们每一个solr都有了自己的solrhome&＃xff0c;现在我们要让每一个solr实例的配置文件都一样&＃xff0c;这个配置文件需要集中管理&＃xff0c;这个时候我们使用zookeeper来统一管理配置文件。所以要将配置文件上传到zookeeper中。那么上传哪些配置文件呢&＃xff1f;

这里注意下managed-schema文件&＃xff0c;网上有很多低版本solr&＃xff0c;会提到一个collection1/conf下的schema.xml&＃xff0c;但是并没有找到。好像是从5.0版本开始不使用schema.xml的&＃xff0c;这俩其实内容都一样&＃xff0c;搞不懂为啥要换个名字&＃xff0c;而且内容格式是xml&＃xff0c;但是文件名却没有.xml的后辍&＃xff0c;这里直接上传整个conf目录就行。

知道了要上传什么&＃xff0c;那么怎么上传呢&＃xff1f;打开最早solr解压出来的原始文件&＃xff08;如果删了那就重新上传解压吧&＃xff09;

在这个目录下有个脚本文件&＃xff0c;执行这个脚本就可以将配置文件上传到zookeeper了&＃xff0c;有点难找&＃xff0c;我是用find命令给搜出来的。不过我这里给出了pwd路径

要注意&＃xff0c;在执行脚本上传配置文件前&＃xff0c;必须先去启动zookeeper集群

然后回来执行脚本

这里脚本的执行命令有点长&＃xff0c;主要是参数多&＃xff0c;建议复制出来改好后再粘贴上去

./zkcli.sh -zkhost 192.168.25.128:2181,192.168.25.128:2182,192.168.25.128:2183 -cmd upconfig -confdir /usr/local/solr-cloud/solrhome01/configsets/sample_techproducts_configs/conf -confname myconf

我解释下各个参数的含义&＃xff1a;

红色框代表zookeeper集群的ip和端口号列表&＃xff08;搭建zookeeper集群的时候配置过的&＃xff09;

绿色框代表要执行的是上传配置文件操作

黄色框代表的是要上传的配置文件目录&＃xff08;低版本不太一样&＃xff0c;具体以那两个主要的配置文件所在目录为准&＃xff0c;不知到在哪就find命令搜吧&＃xff09;

紫色框代表的是你给上传的配置起的名字&＃xff0c;可以改

现在上传完了&＃xff0c;那么我们怎么确定是否上传成功呢&＃xff1f;去zookeeper集群的一个目录找到bin里zookeeper的客户端脚本

运行后&＃xff0c;里面会出现一大堆内容&＃xff0c;如果你不指定参数&＃xff0c;他会默认访问localhost:2181

在最下面执行这个命令&＃xff0c;查看在根目录下有什么&＃xff0c;发现一个configs

再看它里面有什么&＃xff1f;哈&＃xff01;

这就是我们刚才上传的配置了&＃xff0c;名字一样的&＃xff0c;代表上传成功了

然后用quit命令退出

如果你需要修改配置的话&＃xff0c;只用在刚才那个conf目录里改好&＃xff0c;改好后再上传一次就行了&＃xff0c;就会覆盖原来的配置文件

第七步&＃xff1a;修改tomcat/bin目录下的catalina.sh 文件&＃xff0c;关联solr和zookeeper

现在上传好配置文件了&＃xff0c;可是solr和zookeeper还没有建立任何关系&＃xff0c;他们也不知道对方在哪里&＃xff0c;这个时候需要修改4个tomcat的配置文件&＃xff0c;这里只演示tomcat01&＃xff0c;其他三个完全相同照着改

打开catalina.sh文件&＃xff0c;加一个JAVA_OPTS这个参数&＃xff0c;初始化这个值完了会传给solr&＃xff0c;注意不是在这个截图这里修改啊

用/JAVA_OPTS搜索红色框框里的这句话&＃xff08;因为低版本加的位置长的不太一样&＃xff0c;但这句话的例子是不变的&＃xff09;&＃xff0c;在这句话下面的位置加&＃xff08;注意位置啊&＃xff0c;不要弄错了&＃xff09;&＃xff1a;

加上JAVA_OPTS的值&＃xff08;zookeeper集群的ip列表&＃xff09;&＃xff1a;

JAVA_OPTS&＃61;"-DzkHost&＃61;192.168.25.128:2181,192.168.25.128:2182,192.168.25.128:2183"

然后把其他三个tomcat也一改&＃xff0c;改的位置和内容是一样的&＃xff0c;不用变

这样每个solr实例就通过这个参数和zookeeper集群建立了联系&＃xff0c;solr会将自己的状态发送给zookeeper&＃xff0c;比如ip地址啊&＃xff0c;端口号啊&＃xff0c;zookeeper就可以连接到solr了&＃xff0c;建立了通信关系

第八步&＃xff1a;启动每个tomcat实例。要包装zookeeper集群是启动状态

现在需要启动每个tomcat&＃xff0c;当然了&＃xff0c;这个和启动zookeeper集群一样&＃xff0c;要一个一个进去启动&＃xff0c;太麻烦了&＃xff0c;还是写个批处理脚本来运行

/usr/local/solr-cloud/tomcat01/bin/startup.sh
/usr/local/solr-cloud/tomcat02/bin/startup.sh
/usr/local/solr-cloud/tomcat03/bin/startup.sh
/usr/local/solr-cloud/tomcat04/bin/startup.sh

保存&＃xff0c;退出

发现没有运行权限&＃xff0c;添加权限

然后运行脚本&＃xff0c;等等啊&＃xff0c;tomcat集群启动比较慢

如果你想看启动起来没&＃xff0c;可以复制一个会话窗口&＃xff08;我用的xshell5&＃xff09;&＃xff0c;去看看tomcat的日志信息&＃xff08;相当于看控制台打印信息&＃xff09;

用这个命令查看&＃xff0c;我这就查看一个&＃xff0c;应该已经启动好了

这里说个小知识点&＃xff0c;tomcat8开始&＃xff0c;默认启动的是NIO模式&＃xff0c;7默认启动的是BIO模式&＃xff0c;还可以通过配置设置APR模式启动&＃xff0c;至于APR&＃xff0c;NIO和BIO的区别&＃xff0c;是和tomcat并发性能有关的&＃xff0c;高并发的系统应该将tomcat的模式设置成APR模式&＃xff0c;会大幅度的提高服务器的处理和响应性能。感兴趣的可以自己百度下。当然这个不用在意&＃xff0c;跟本文集群搭建没啥关系&＃xff0c;就是想到了说一下。

第九步&＃xff1a;访问集群

然后用自己的电脑访问下咱们的集群吧&＃xff0c;之前单机版是没有红框框出来的两个东西的&＃xff0c;出现这个就是OK了

我这里还没创建collections&＃xff0c;所以啥都没有&＃xff1a;

注意下访问地址的输入&＃xff0c;要写全。访问地址写成这样会404

第十步&＃xff1a;创建新的Collection进行分片处理

点击页面的Collections按钮&＃xff0c;然后就能添加了&＃xff08;高版本的solr才有&＃xff0c;低版本的需要通过地址栏传递参数去设置&＃xff0c;比较麻烦&＃xff09;

我这里选择的是名字叫mycollection1&＃xff0c;用自己上传的myconf配置文件&＃xff0c;有2片shard&＃xff0c;每个shard有2个备份节点一主一备

然后回去看下&＃xff0c;这样solr集群就搭建ok了&＃xff01;

第十一步&＃xff1a;删除不用的Collection或core

删除collection&＃xff0c;点这里&＃xff0c;然后输入你要删除的collection名称就行

 删除core在右边&＃xff0c;完了如果要添加下面有add replica&＃xff08;如果工作中你的哪个备份机挂了&＃xff0c;就这样删掉挂的服务器&＃xff0c;再添加一个好的就行&＃xff0c;当然了&＃xff0c;在这里添加前&＃xff0c;肯定是需要在服务器上部署好solr服务&＃xff0c;然后连接zookeeper集群才行的&＃xff09;