一、概述
使用Solr实现电商网站中商品信息搜索功能,可以根据关键字、分类、价格搜索商品信息,也可以根据价格进行排序。
1.1 实现方法
在一些大型门户网站、电子商务网站等都需要站内搜索功能,使用传统的数据库查询方式实现搜索无法满足一些高级的搜索需求,比如:搜索速度要快、搜索结果按相关度排序、搜索内容格式不固定等,这里就需要使用全文检索技术实现搜索功能。
-
使用Lucene实现:单独使用Lucene实现站内搜索需要开发的工作量较大,主要表现在:索引维护、索引性能优化、搜索性能优化等,因此不建议采用。
-
使用solr实现:基于Solr实现站内搜索扩展性较好并且可以减少程序员的工作量,因为Solr提供了较为完备的搜索引擎解决方案,因此在门户、论坛等系统中常用此方案。
1.2 什么是solr
Solr 是Apache下的一个顶级开源项目,采用Java开发,它是基于Lucene的全文搜索服务器。Solr提供了比Lucene更为丰富的查询语言,同时实现了可配置、可扩展,并对索引、搜索性能进行了优化。
Solr可以独立运行,运行在Jetty、Tomcat等这些Servlet容器中,Solr 索引的实现方法很简单,用 POST 方法向 Solr 服务器发送一个描述 Field 及其内容的 XML 文档,Solr根据xml文档添加、删除、更新索引 。Solr 搜索只需要发送 HTTP GET 请求,然后对 Solr 返回Xml、json等格式的查询结果进行解析,组织页面布局。Solr不提供构建UI的功能,Solr提供了一个管理界面,通过管理界面可以查询Solr的配置和运行情况。
1.3 Solr与Lucene的区别
Lucene是一个开放源代码的全文检索引擎工具包,它不是一个完整的全文检索引擎,Lucene提供了完整的查询引擎和索引引擎,目的是为软件开发人员提供一个简单易用的工具包,以方便的在目标系统中实现全文检索的功能,或者以Lucene为基础构建全文检索引擎。
Solr的目标是打造一款企业级的搜索引擎系统,它是一个搜索引擎服务,可以独立运行,通过Solr可以非常快速的构建企业的搜索引擎,通过Solr也可以高效的完成站内搜索功能。
二、Solr安装及配置
2.1 Solr的下载
Solr官方网站:
2.2 Solr的文件夹结构
将solr-4.10.3.zip解压:
-
bin:solr的运行脚本
-
contrib:solr的一些贡献软件/插件,用于增强solr的功能。
-
dist:该目录包含build过程中产生的war和jar文件,以及相关的依赖文件。
-
docs:solr的API文档
-
example:solr工程的例子目录:
- example/solr:该目录是一个包含了默认配置信息的Solr的Core目录。
-
example/multicore:该目录包含了在Solr的multicore中设置的多个Core目录。
-
example/webapps:该目录中包括一个solr.war,该war可作为solr的运行实例工程。
- licenses:solr相关的一些许可信息
2.3 运行环境
solr 需要运行在一个Servlet容器中,Solr4.10.3要求jdk使用1.7以上,Solr默认提供Jetty(java写的Servlet容器),本教程使用Tocmat作为Servlet容器。
2.4 Solr整合tomcat
【Solr Home与SolrCore】
创建一个SolrHome目录,SolrHome是Solr运行的主目录,目录中包括了运行Solr实例所有的配置文件和数据文件,Solr实例就是SolrCore,一个SolrHome可以包括多个SolrCore(Solr实例),每个SolrCore提供单独的搜索和索引服务。
example\solr是一个solr home目录结构,如下:
上图中“collection1”是一个SolrCore(Solr实例)目录 ,目录内容如下所示:
说明:
-
- collection1:叫做一个Solr运行实例SolrCore,SolrCore名称不固定,一个solr运行实例对外单独提供索引和搜索接口。
- solrHome中可以创建多个solr运行实例SolrCore。
- 一个solr的运行实例对应一个索引目录。
- conf是SolrCore的配置文件目录 。
- data目录存放索引文件需要创建
【整合步骤】
第一步:把\solr-4.10.3\dist\solr-4.10.3.war复制到tomcat 的webapp目录下,改名为solr.war。
第二步:solr.war解压。使用压缩工具解压或者启动tomcat自动解压。解压之后删除solr.war
第三步:把\solr-4.10.3\example\lib\ext目录下的所有的jar包添加到solr工程中
第四步:配置solrHome和solrCore
1)创建一个solrhome(存放solr所有配置文件的一个文件夹)。\solr-4.10.3\example\solr目录就是一个标准的solrhome。
2)把\solr-4.10.3\example\solr文件夹复制到D:\temp路径下,改名为solrhome,改名不是必须的,是为了便于理解。
3)在solrhome下有一个文件夹叫做collection1这就是一个solrcore。就是一个solr的实例。一个solrcore相当于mysql中一个数据库。Solrcore之间是相互隔离。
-
-
- 在solrcore中有一个文件夹叫做conf,包含了索引solr实例的配置信息。
- 在conf文件夹下有一个solrconfig.xml。配置实例的相关信息。如果使用默认配置可以不用做任何修改
${solr.data.dir:} explicit 10 text
-
第五步:告诉solr服务器配置文件也就是solrHome的位置。修改solr项目的web.xml。
第六步:启动tomcat
第七步:访问http://localhost:8080/solr/,进入solr后台管理
2.5 配置中文分析器(IKAnalyzer)
第一步:把IKAnalyzer2012FF_u1.jar添加到solr/WEB-INF/lib目录下。
第二步:复制IKAnalyzer的配置文件和自定义词典和停用词词典到solr的classpath下。
第三步:修改 Solrhome 的 schema.xml 文件,配置一个 FieldType,使用 IKAnalyzer
第四步:定义field,指定field的type属性为text_ik
第五步:重启tomcat
测试:
2.6 配置域
域相当于数据库的表字段,用户存放数据,因此用户根据业务需要去定义相关的Field(域),一般来说,每一种对应着一种数据,用户对同一种数据进行相同的操作。配置域需要修改solrhome的schema.xml 文件。schema.xml,在SolrCore的conf目录下,它是Solr数据表配置文件,它定义了加入索引的数据的数据类型的。主要包括FieldTypes、Fields和其他的一些缺省设置。
【FieldType域类型定义】
【Field定义】
【uniqueKey】——Solr中默认定义唯一主键key为id域
id
【copyField复制域】——可以将多个Field复制到一个Field中,以便进行统一的检索
比如,输入关键字(product_keywords)搜索商品名称(product_name)和商品描述(product_description)
定义product_keywords、product_name、product_description的域:
根据关键字只搜索product_keywords域的内容就相当于搜索product_name和product_description,将product_name和product_description复制到product_keywords中,如下:
【dynamicField】
动态字段就是不用指定具体的名称,只要定义字段名称的规则,例如定义一个 dynamicField,name 为*_i,定义它的type为text,那么在使用这个字段的时候,任何以_i结尾的字段都被认为是符合这个定义的,例如:name_i,gender_i,school_i等。
自定义Field名为:product_title_t,“product_title_t”和scheam.xml中的dynamicField规则匹配成功,如下:
“product_title_t”是以“_t”结尾。
例如,我们需要实现如下效果:
就需要在Schema.xml中添加配置:
2.7 设置业务系统Field
如果不使用Solr提供的Field可以针对具体的业务需要自定义一套Field,如下是商品信息Field: