热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

solr安装以及php调用

背景:项目中需要将原有的sphinx搜索引擎换成solr,以下是通过参照网络内容后,从搭建到调用的一次整理。资源:http:blog.csdn.netlynnloveminarticlede

背景:项目中需要将原有的sphinx搜索引擎换成solr,以下是通过参照网络内容后,从搭建到调用的一次整理。

资源:http://blog.csdn.net/lynnlovemin/article/details/12103343   solr部署到服务器tomcat中(服务器上的jdk和tomcat已经配置好)

            http://www.php.net/manual/zh/class.solrquery.php  solr扩展方式调用参照

            http://wiki.apache.org/solr/CommonQueryParameters#q  solr客户端代码调用参照

            https://code.google.com/p/solr-php-client/downloads/list  solr客户端调用需要下载的文件包地址

            http://www.solr.cc/blog/  solr中国社区    官方QQ群:187670960

一.在服务器上将solr部署到tomcat中

主要步骤如下:

1、下载solr-4.4.0.tgz

2、解压缩solr-4.4.0.tgz,命令tar -xzvf solr-4.4.0.tgz

3、压缩后进入到solr-4.4.0目录,将 example/ webapps目录下的solr.war复制到tomcat的webapps目录中,

4、启动tomcat服务器,这时候会报错,不用管它,war会自动解压缩

5、在tomcat的bin里面新建一个solr目录

6、继续到solr-4.4.0目录,将example/solr目录下的collection1目录和solr.xml复制到tomcat的bin目录下的solr目录

7、将example/lib/ext/下的所有jar包复制到tomcat/webapps/solr/WEB-INF的lib目录中

8、在tomcat/webapps/solr/WEB-INF/下新建一个classes目录,将example/resources下的文件复制到该classes目录中

9、修改web.xml文件,为:


solr/home
/home/liyi/solrtomcat/bin/solr
java.lang.String
10、再次启动tomcat,浏览器输入:http://localhost:8080/solr就能看到solr的管理界面了。

二.php客户端调用服务器solr和通过安装solr的php扩展调用服务器solr的代码coding

1、首先将要用到的solr-php-client下载下来,放入到自己的php文件中(需要用到扩展方式还需装好扩展)

2、开始coding自己的代码,期间需要用的查询q,过滤fq,排序sort等参数说明可以见上面的资源

3、自己的php代码如下(已验证可用,代码包含了两种调用方式。代码有点长初版本没怎么优化,可以根据自己的需要ctrl+c后删除不需要的部分)

require_once( ROOT_PATH.'/includes/Solr/Service.php');
class SolrSearch{
const SOLR_HOST = '172.18.107.96';
const SOLR_PORT = '8888';
const SOLR_URL = 'solr';

/**
* php通过solr文件包连接服务器端
*/
public static function solr_server(){
$solrSearcher = new Apache_Solr_Service( self::SOLR_HOST, self::SOLR_PORT, self::SOLR_URL );
if ( ! $solrSearcher->ping() ) {
echo 'Solr service not responding.';
exit;
}
return $solrSearcher;
}

/**
* php通过solr扩展连接服务器端
*/
public static function extention_solr_server()
{
$extention_solrcOnfig=array('hostname' => self::SOLR_HOST,'port'=>self::SOLR_PORT);
try {
$solrSearcher = new SolrClient($extention_solrconfig);
$solrSearcher->ping(); //需要,不调用ping()的时候如果服务器连接不上不会抛异常
} catch (Exception $e) {
echo "Solr extention service connect fail.";
exit;
}
return $solrSearcher;
}

/**
* php文件包方式查询方法
*/
public static function solr_query($query,$pageinfo=array('offset'=>0,'limit'=>600),
$params=array('fl'=>'','fq'=>array())){
$solrSearcher=self::solr_server();

$params['fl']=$params['fl']?$params['fl'].",score":"*,score";
$respOnse= $solrSearcher->search( $query , $pageinfo['offset'], $pageinfo['limit'] ,$params);

$result=array();
$found_num=0;
$http_status=$response->getHttpStatus();

if ( $http_status == 200 ) {
$response_result=$response->response;
$found_num=$response_result->numFound;

if ( $found_num > 0 ) {
$search_docs=$response_result->docs;
$highlighting=$response->highlighting;
foreach ($search_docs as $s_k=>$s_v){
$lists=get_object_vars($s_v->getIterator());
$lists['goods_color_name']=empty($highlighting->$lists['goods_id']->goods_name[0]) ? $lists['goods_name'] : $highlighting->$lists['goods_id']->goods_name[0];
$result['lists'][]=$lists;
}
}
$result['total']=$found_num;
$result['goods_status']=array();
$result['total_found']=$found_num;
}
else {
echo $response->getHttpStatusMessage();
}

return $result;
}

/**
* 获取关键字分词后形成的词
*/
public static function getWords($keyword)
{
$keyword = trim($keyword);
$words = array();
if ($keyword)
{
$wordsInfo = self::getWordsInfo($keyword);
if (is_array($wordsInfo) && !empty($wordsInfo))
{
foreach ($wordsInfo as $val)
{
$words[] = $val['text'];
}
}
}
return $words;
}

/**
* 获取关键字分词后的信息
*/
public static function getWordsInfo($keyword)
{
$keyword = urlencode($keyword);

// 拼接 调用分词接口的url
$url = "http://172.18.107.96:8888/solr/collection1/analysis/field?wt=json&analysis.showmatch=true&analysis.fieldvalue=".$keyword."&analysis.fieldname=MaxWord&_=".time();
$i = 0; // 记录查询失败的次数
$code = 0; // 记录查询状态
$respOnseStr= ""; // 接口返回json字符串
while($code == 0 && $i <5) //查询失败重试
{
$ch=curl_init();
curl_setopt($ch,CURLOPT_URL,$url);
curl_setopt($ch,CURLOPT_HEADER,0);
curl_setopt($ch,CURLOPT_TIMEOUT,10);
curl_setopt($ch,CURLOPT_RETURNTRANSFER,1);

$respOnseStr= curl_exec($ch);
$code = curl_getinfo($ch,CURLINFO_HTTP_CODE);
$i += $code ? 0 : 1; //失败则查询次数加1
curl_close($ch);
}

// 解析接口返回的字符串 获取分词信息以数组形式保存
if ($responseStr)
{
$respOnseArr= json_decode($responseStr,true);
if (isset($responseArr['analysis']['field_names']['MaxWord']['index']))
{
return $responseArr['analysis']['field_names']['MaxWord']['index'][1];
}
}
return array();
}

/**
* 将收集到查询条件转换成solr要用到的信息 进行solr搜索
*/
public static function find($cOnditions= array())
{
// 定义存储 solr应用中q查询操作信息 $q = "goods_name:红色帽子 OR price:30";(对象包含关键字,一二级分类,属性)
$q = "";
if (empty($_GET['keyword']))
{
$q .= "goods_name:*";
}
else
{
$q .= "goods_name:".$_GET['keyword'];
}

// 拼接分类条件信息
if (!empty($conditions['select']))
{
if ($conditions['select'] == 1)
{
$q .= " AND cate_id_1:".$conditions['filter']['cate_id_1'][0];
}
else if ($conditions['select'] == 2)
{
$q .= " AND cate_id_2:".$conditions['filter']['cate_id_2'][0];
}
}

// 拼接属性条件信息
if (!empty($_GET['g'])) // [g] => 2966_15449-2961_3007
{
$attr_id_arr = explode('-', $_GET['g']);

foreach ($attr_id_arr as $val)
{
$arr = explode('_', $val);
$q .= " AND attr_id:*".$arr[1]."*";
}
}

// 判断扩展方式是否可用,决定调用的方式
if (class_exists('SolrClient')) // 通过solr的php扩展方式进行solr的连接处理
{
$client = self::extention_solr_server();
$query = new SolrQuery();
// 设置sorl查询的q信息
//$query->setQuery('goods_name:红色帽子');
$query->setQuery($q);
// 设置获取结果的起始位置
$query->setStart(0);
// 设置获取结果的记录数
$query->setRows(600); // 类似分页的取出记录条数
// 设置排序信息SolrQuery::ORDER_ASC ,SolrQuery::ORDER_DESC
//$query->addSortField("goods_id",SolrQuery::ORDER_DESC);
// 设置sorl查询的fq信息
$fqInfo = self::getFqInfo($conditions,$query);
if (!empty($fqInfo))
{
$query = $fqInfo;
}

$queryRespOnse= $client->query($query);
$respOnse= $queryResponse->getResponse();
if ( $response->responseHeader->status == 0 ) {
$response_result=$response->response;
$found_num=$response_result->numFound;

if ( $found_num > 0 ) {
$search_docs=$response_result->docs;
$highlighting=$response->highlighting;

foreach ($search_docs as $s_k=>$s_v){
// $lists=get_object_vars($s_v->getIterator());
$lists=json_decode(json_encode($s_v),true);
$lists['goods_color_name']=empty($highlighting->$lists['goods_id']->goods_name[0]) ? $lists['goods_name'] : $highlighting->$lists['goods_id']->goods_name[0];
$result['lists'][]=$lists;
}
}
$result['total']=$found_num;
$result['goods_status']=array();
$result['total_found']=$found_num;
}
else {
echo $response->getHttpStatusMessage();
}
$data = $result;
}
else // 通过solr的php文件包方式进行solr的连接处理
{
// 定义存储 solr应用中排序sort,过滤查询fq,返回结果字段fl等信息 的数组
$params = array();
$params['fl'] = "";
//$params['sort'] = $conditions['order']; //权重分字段没有,暂时注释
$params['sort'] = "goods_id desc";

// 定义高亮显示参数(有关键字时将关键字高亮)
if (!empty($_GET['keyword']))
{
$params['hl'] = "true";
$params['hl.fl'] = "goods_name";
$params['hl.simple.pre'] = "";
$params['hl.simple.post'] = "
";
}

// 定义存储fq过滤信息数组,每个字段的条件设置作为数组$fq一个元素(包含)
$fq = self::getFqInfo($conditions);
if (!empty($fq))
{
$params['fq'] = $fq;
}

// 用拼接好的参数调用solr查询
$data = self::solr_query($q,array('offset'=>0,'limit'=>600),$params);
}

// clear参数为7打印语句
if ($_GET['clear'] == 7)
{
echo "
";print_r($data);exit;
}

// 将关键字信息存入data数据中
$data['words']=self::getWords($_GET['keyword']);
return $data;
}

/**
*
* 依照前台处理后的条件数据转换成solr查询应用的过滤fq信息
* $query object 区别当前是以php文件包的方式还是扩展的方式调用solr(默认是php文件包方式,$query不为null则是扩展方式)
* @param array $conditions
*/
private static function getFqInfo($conditions,$query=null)
{
// 定义前台传递参数与solr应用参数之间的key对应关系(其中数组key为前台key,数组val为solr应用key)
$solr_key=array(
'price'=>'price', // 价格
'return_goods_status'=>'return_goods_status', // 48小时包退包换
'if_free_shipping'=>'if_free_shipping', // 免运费字段
'if_new_goods'=>'if_new_goods', // 新品
'real_shot'=>'real_shot', // 实拍
'is_enterprise'=>'is_enterprise', // 企业身份认证
'is_entity'=>'is_entity', // 实体认证
'is_behalfof'=>'is_behalfof', // 一件代发
'is_specialmem_status'=>'is_specialmem_status', // 免费看样
'is_promise'=>'is_promise', // 店铺等级
//'minbuy'=>'minbuy', // 起批数量
//'minbuyprice'=>'minbuyprice', // 起批价格
);

// 定义通过solr的php文件包形式调用solr服务器时fq信息存储数组
$fq = array();

// 当前台页面传递过来的参数中包含过滤条件时,依照不同的调用方式解析成solr应用的过滤fq信息
if (!empty($conditions['filter']))
{
foreach ($conditions['filter'] as $key=>$val)
{
$fq_info_str = "";
if (array_key_exists($key, $solr_key))
{
if ($key == "price")
{
$minPrice = strval(empty($val['min']) ? 0 : $val['min']);
$maxPrice = strval(empty($val['max']) ? "*" : $val['max']);
$fq_info_str = "price:[".$minPrice." TO ".$maxPrice."]";
}
else
{
if (is_array($val))
{
$fq_info_str = $solr_key[$key].":".$val[0];
}
else
{
$fq_info_str = $solr_key.":".$val[0];
}
}
}

/* $query不为null时,此时通过solr的php扩展方式调用solr服务器,fq信息通过$query->addFilterQuery("price:30");添加
* $query为null时,此时通过solr的php文件包调用solr服务器,fq信息通过$fq[] = "price:30";添加
*/
if ($fq_info_str != "")
{
if ($query != null)
{
$query->addFilterQuery($fq_info_str);
}
else
{
$fq[] = $fq_info_str;
}
}
}

// 依照调用方式的不同返回不同的值
if ($query != null)
{
return $query;
}
else
{
return $fq;
}
}
else
{
return ;
}
}
}
三.php的solr扩展安装

1.安装扩展前,先安装libxml2(可以谷歌下安装过程)。安装过程中在make的时候有时候会报错,这时候可以运行下make clean命令就可以了,详细的见http://www.cnblogs.com/wanhl/archive/2013/03/19/2969758.html

2.安装扩展内容(下面内容)可以查看:http://www.cnblogs.com/AndreMouche/archive/2011/07/31/2122872.html

libxml2 2.6.31或以上版本 libcurl 7.18.0 或以上版本 到php官网下载solr:http://pecl.php.net/package/solr 然后: /usr/local/php5/bin/phpize
./configure --with-php-cOnfig=/usr/local/php5/bin/php-config
sudo make
sudo make test
sudo make install

安装完后会有类似这样的提示:
Installing shared extensions:         /usr/local/lib/php/extensions/no-debug-non-zts-20090626/
把这个记住,然后修改php.ini(vim /usr/local/etc/php.ini ),把
extension_dir = "./"
修改为
extension_dir = "/usr/local/php/lib/php/extensions/no-debug-non-zts-20090626/"

并添加一行
extension=solr.so
注意:/usr/local/php5/bin/phpize 可能会出现变化,具体根据php的安装位置而定。

四、安装solr扩展

下载资源   wget "http://pecl.php.net/get/solr-2.0.0.tgz"

解压  tar zxvf solr-2.0.0.tgz

进入解压后目录 cd solr-2.0.0

运行  

phpize

./configure

make install

在/etc/php.d下随便复制一个扩展的文件,把里面加载的扩展改成solr.so。重启php-fpm加载solr扩展:service php-fpm reload

补充上面的




推荐阅读
  • Java在运行已编译完成的类时,是通过java虚拟机来装载和执行的,java虚拟机通过操作系统命令JAVA_HOMEbinjava–option来启 ... [详细]
  • XML介绍与使用的概述及标签规则
    本文介绍了XML的基本概念和用途,包括XML的可扩展性和标签的自定义特性。同时还详细解释了XML标签的规则,包括标签的尖括号和合法标识符的组成,标签必须成对出现的原则以及特殊标签的使用方法。通过本文的阅读,读者可以对XML的基本知识有一个全面的了解。 ... [详细]
  • flowable工作流 流程变量_信也科技工作流平台的技术实践
    1背景随着公司业务发展及内部业务流程诉求的增长,目前信息化系统不能够很好满足期望,主要体现如下:目前OA流程引擎无法满足企业特定业务流程需求,且移动端体 ... [详细]
  • 如何实现JDK版本的切换功能,解决开发环境冲突问题
    本文介绍了在开发过程中遇到JDK版本冲突的情况,以及如何通过修改环境变量实现JDK版本的切换功能,解决开发环境冲突的问题。通过合理的切换环境,可以更好地进行项目开发。同时,提醒读者注意不仅限于1.7和1.8版本的转换,还要适应不同项目和个人开发习惯的需求。 ... [详细]
  • Servlet多用户登录时HttpSession会话信息覆盖问题的解决方案
    本文讨论了在Servlet多用户登录时可能出现的HttpSession会话信息覆盖问题,并提供了解决方案。通过分析JSESSIONID的作用机制和编码方式,我们可以得出每个HttpSession对象都是通过客户端发送的唯一JSESSIONID来识别的,因此无需担心会话信息被覆盖的问题。需要注意的是,本文讨论的是多个客户端级别上的多用户登录,而非同一个浏览器级别上的多用户登录。 ... [详细]
  • 本文介绍了在sqoop1.4.*版本中,如何实现自定义分隔符的方法及步骤。通过修改sqoop生成的java文件,并重新编译,可以满足实际开发中对分隔符的需求。具体步骤包括修改java文件中的一行代码,重新编译所需的hadoop包等。详细步骤和编译方法在本文中都有详细说明。 ... [详细]
  • 本文讨论了在shiro java配置中加入Shiro listener后启动失败的问题。作者引入了一系列jar包,并在web.xml中配置了相关内容,但启动后却无法正常运行。文章提供了具体引入的jar包和web.xml的配置内容,并指出可能的错误原因。该问题可能与jar包版本不兼容、web.xml配置错误等有关。 ... [详细]
  • Spring框架《一》简介
    Spring框架《一》1.Spring概述1.1简介1.2Spring模板二、IOC容器和Bean1.IOC和DI简介2.三种通过类型获取bean3.给bean的属性赋值3.1依赖 ... [详细]
  • Sleuth+zipkin链路追踪SpringCloud微服务的解决方案
    在庞大的微服务群中,随着业务扩展,微服务个数增多,系统调用链路复杂化。Sleuth+zipkin是解决SpringCloud微服务定位和追踪的方案。通过TraceId将不同服务调用的日志串联起来,实现请求链路跟踪。通过Feign调用和Request传递TraceId,将整个调用链路的服务日志归组合并,提供定位和追踪的功能。 ... [详细]
  • 本文介绍了Web学习历程记录中关于Tomcat的基本概念和配置。首先解释了Web静态Web资源和动态Web资源的概念,以及C/S架构和B/S架构的区别。然后介绍了常见的Web服务器,包括Weblogic、WebSphere和Tomcat。接着详细讲解了Tomcat的虚拟主机、web应用和虚拟路径映射的概念和配置过程。最后简要介绍了http协议的作用。本文内容详实,适合初学者了解Tomcat的基础知识。 ... [详细]
  • Java验证码——kaptcha的使用配置及样式
    本文介绍了如何使用kaptcha库来实现Java验证码的配置和样式设置,包括pom.xml的依赖配置和web.xml中servlet的配置。 ... [详细]
  • 本文介绍了关于apache、phpmyadmin、mysql、php、emacs、path等知识点,以及如何搭建php环境。文章提供了详细的安装步骤和所需软件列表,希望能帮助读者解决与LAMP相关的技术问题。 ... [详细]
  • 标题: ... [详细]
  • Oracle优化新常态的五大禁止及其性能隐患
    本文介绍了Oracle优化新常态中的五大禁止措施,包括禁止外键、禁止视图、禁止触发器、禁止存储过程和禁止JOB,并分析了这些禁止措施可能带来的性能隐患。文章还讨论了这些禁止措施在C/S架构和B/S架构中的不同应用情况,并提出了解决方案。 ... [详细]
  • 开发笔记:spring boot项目打成war包部署到服务器的步骤与注意事项
    本文介绍了将spring boot项目打成war包并部署到服务器的步骤与注意事项。通过本文的学习,读者可以了解到如何将spring boot项目打包成war包,并成功地部署到服务器上。 ... [详细]
author-avatar
菜鸟php
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有