當前位置：首頁 > 前端技术 > javascript >内容正文

javascript

Solr及Spring-Data-Solr入门学习

發布時間：2024/4/14 javascript 43 豆豆

生活随笔收集整理的這篇文章主要介紹了 Solr及Spring-Data-Solr入门学习小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

2019獨角獸企業重金招聘Python工程師標準>>>

Solr的安裝與配置

多數搜索引擎應用都必須具有某種搜索功能，而搜索功能往往大量的消耗資源導致應用程序運行緩慢。為此，出現了各種用于構建搜索的應用程序，我們要學習的solr正是其中的一款開源搜索平臺。

Apache Solr 是建立在Lucene(全文搜索引擎)之上，幫助我從大量的數據中尋找所需信息。不僅限于搜索，Solr也可用于儲存目的。像其他NoSQL數據庫一樣，它是一種非關系數據儲存和處理技術。

下面我們開始喜聞樂見的手摸手教學，教你優雅的整合SSM框架和Solr搜索框架。

項目開源地址： Github

項目中使用了SSM + Shiro + Redis + Solr + Vue.JS + ElementUI技術，優雅的整合了SSM框架階段幾個常見的企業框架；并用Vue.js + ElementUI寫了超漂亮的前端頁面；如果覺得可以，就點亮右上角star吧(#^.^#)。

如果你對Shiro+用戶-角色-權限整合不是很懂，你或許可以看下我的這個項目：手摸手教你SSM整合Shiro框架后的開發。

日常學習記錄，如果想支持我，希望能在Github上看到你點亮的星星(#^.^#)。

本例中使用的Solr和Tomcat我已經上傳到了Github，倉庫地址： Tomcat搭建Solr運行環境，集成Ik 中文分詞器

安裝

在 Apache Solr官網下載最新版的Solr，在 Apache Tomcat官網下載Tomcat。

解壓solr，發現其中有如下目錄結構

新版本的Solr和老版本的不同，老版本中直接提供的是war文件，新版本則是提供了直接可運行的項目；其次需要導入項目中的的文件也有所不同的。下面我們介紹一下完整的配置和Solr項目的啟動：

1、將solr-7.4.0/server/solr-webapp/下的webapp文件夾拷貝到Tomcat下的webapps目錄下（并重命名為solr）。
2、將solr-7.4.0/server/lib/ext/下的所有Jar文件全部拷貝到Tomcat下webapps/solr/WEB-INF/lib目錄下。
3、將solr-7.4.0/server/lib下所有metrics開頭的jar文件全部拷貝到webapps/solr/WEB-INF/lib目錄下。
4、將solr/7.4.0/server/solr文件夾復制到任意一個位置并重命名為solrhome。
5、修改tomcat/webapps/solr/WEB-INF/web.xml文件的第41行，指定solrhome所在的目錄。

6、在webapps/solr/WEB-INF/web.xml下的第125行出添加注釋，也就是注釋<security-constraint></secirity-constraint>節點下的配置。

7、啟動Tomcat，在瀏覽器中訪問http://localhost:8080/solr/index.html即可訪問到solr Admin

如上所示，你會發現其左下角顯示的是No cores，這和老版本的可能又有所差別，所以我們點擊No cores，創建一個新的cores，那么會在我們指定的solrhome文件夾內產生一個new_core的空文件夾，并且頁面會報錯：Can't find resource 'solrconfig.xml' in xxx，表示的就是在這個新core下的conf文件夾下沒有找到solrconfig.xml文件：

我們需要將復制來的configsets/_default/conf這個文件夾（或者solr-7.4.0/server/solr/configsets/_default/conf文件夾）復制到solrhome/new_core/文件夾下。

8、重啟Tomcat服務器，發現還是沒有出現新的core，點擊No cores那里點擊add core，此時就會完整的創建一個新的core，在solrhome/new_core文件夾下會生成新的文件：

至此Solr已經安裝完成。

中文分詞器

上面我們成功的安裝了solr，下面就要進行相關的配置。因為solr是一個開源的搜索平臺，主要功能就是把用戶輸入的搜索信息分類匯總并進行數據庫的查詢，而中文眾所周知語義比較復雜，而且中文所占的字節和英文也有所不同，所以就出現了中文分詞器，實現模擬中文語義對數據進行分詞衍化。IK Analyzer正是其中的一種分詞器。

IK Analyzer在solr工程中的配置如下：

1、下載ikanalyzer相關配置文件，因為Maven倉庫中的ikanalyzer版本太老，solr5以上的版本都不支持，所以這里提供一個新版本：傳送門
2、將下載的jar文件copy到webapps/solr/WEB-INF/lib文件夾下
3、在webapps/solr/WEB-INF/下創建classes文件夾，將上面下載的文件夾中的ext.dic、IKAnalyzer.cfg.xml、stopword.dic三個文件復制到webapps/solr/WEB-INF/classes/文件夾下。
4、在solrhome/conf/目錄下我們發現并沒有schema.xml文件，這和老版本又有所不同，老版本直接生成好了schema.xml文件，在新版本中我們可以發現/conf文件夾中存在一個managed-schema文件，這個其實就是我們要的schema.xml文件。但是我們又不能直接用，具體原因參考博文
5、直接將managed-schema文件重命名為schema.xml。并在schema.xml的最后添加<fieldType>節點：

6、重啟Tomcat服務器，重新訪問項目，點擊new_core下的Schema功能，在select下拉框中輸入text_ik如果出現剛創建的text_ik，說明IK中文分詞器安裝成功。

測試

未使用分詞器效果：

使用了分詞器的效果顯而易見：

配置域

solr和其他NoSQL數據庫一樣可以實現數據存儲，所以我們可以以數據庫的思想想象一下solr，之前我們新創建的core就類似一個數據庫，那么下面要配置的域就相當于數據庫的表字段，因此要手動的去定義系統中需要的字段Field（域）。

通常我們創建的一種Field分別對應這一類數據，用戶對同一種數據進行相同的操作。域常用的屬性有：

name: 指定域的名稱
type: 指定域的類型
indexed: 是否索引
stored: 是否儲存
required: 是否必須
multiValued: 是否多值

域的介紹

如上面的介紹，域類似數據庫中的表字段，而我們做項目時數據庫的字段都是根據項目需求創建的，所以域也是如此，它是根據搜索平臺需要搜索的信息對應的數據庫表字段來創建的。

比如，在淘寶商城購買商品，我們可能會搜索：1、品牌（對應數據庫中brand字段）；2、價格（對應數據庫中price字段）；3、商品介紹名稱（對應數據庫中title字段）等等...

每一中域（字段）都用<field>字段設定，比如如上的搜索數據，我們可以設置為：

在新版本的solr中，type屬性不能單單設置為基本的數據類型名稱了，具體用法要參考schema.xml文件中之前已存在的配置，例如：long要寫成plong，double要寫為pdouble，不然就會報錯。

注意：

你會奇怪域的設定不就是根據用戶搜索的數據分類來設定的嗎，那為何還要指定indexed="true"，原因：可能有些數據是不是用戶輸入的查詢的，但是還是需要在用戶搜索的同時檢索出來。
你會奇怪為何要設定stored，原因：大多數域都是要進行存儲的，但是也有不需要存儲的，比如復制域。

復制域

復制域的作用在于將某一個Field中的數據復制到另一個域中。由于用戶輸入的數據可能是查詢的價格，也可能是商品的title，又或者是商品的品牌等... 我們無法預測用戶要查詢的是什么，由此出現了搜索引擎平臺，幫助我們對查詢數據進行分類。所以，solr的目標是實現兩種不同的域可以在同一個域中查詢（發送一次請求），而復制域的出現正可解決這一問題。

如此，我們為上面要查詢的字段設定復制域：

其中的source屬性值要和<field>中的name保持一致。

動態域

在項目中，商品的數據可能會動態的添加或減少，比如原來沒有的數據，但是后來又完善添加上去了，那么就需要動態的配置從而實現用戶能及時查詢到。

Spring Data Solr入門

經過上面的安裝和配置大家應該已經知道如何配置Solr，那么就會思考一個問題了：這個solr項目和我們實際的項目查詢有什么關系呢？是怎么結合的呢？

solr官方提供了solrj API，就是一個jar文件，我們可以通過solr官方提供的接口來實現本地項目和solr項目的交互；而這里我們要介紹的是Spring Data Solr，它是Spring Data家族對solrj進行封裝后的框架。

注意上面我們在Tomcat中部署的solr項目是不需要再進行位置上的變動的，也就是他必須是已經在Tomcat中部署好的，而我們自己的項目啟動時不能再使用8080端口（因為solr本身就占用了Tomcat的端口，而我們的項目是可以改變運行端口的，總之兩者無論是不是在同一個Tomcat服務器中部署都不能使用同一端口）。我們通過配置文件就能訪問到這個指定端口的solr項目（Tomcat必須是啟動著的），通過Spring Data Solr提供的接口就能實現交互：所謂交互 --> 等價于查詢solr中以存在的數據，然后將結果返回：
- 用戶查詢，請求接口將查詢條件交給solr（通過Spring Data Solr提供的接口訪問Solr服務），solr對自身已存在的數據進行查找

準備

導入jar文件

<dependency><groupId>org.springframework.data</groupId><artifactId>spring-data-solr</artifactId><version>1.5.5.RELEASE</version> </dependency>

創建配置文件

既然是Spring家族的框架，當然要進行配置使用了，創建spring-solr.xml

<?xml version="1.0" encoding="UTF-8"?> <beans xmlns="http://www.springframework.org/schema/beans"xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"xmlns:solr="http://www.springframework.org/schema/data/solr"xsi:schemaLocation="http://www.springframework.org/schema/data/solrhttp://www.springframework.org/schema/data/solr/spring-solr-1.0.xsdhttp://www.springframework.org/schema/beanshttp://www.springframework.org/schema/beans/spring-beans.xsd"><solr:solr-server id="solrServer" url="http://127.0.0.1:8080/solr/new_core"/><bean id="solrTemplate" class="org.springframework.data.solr.core.SolrTemplate"><constructor-arg ref="solrServer"/></bean> </beans>

注意：

一定要注意solr配置中solr服務器地址的配置，這個url一定是solr項目訪問地址 + /core實例名稱組合的路徑。一般我們新建的core實例名稱就是new_core。

為實體類屬性添加@Field注解

上面完成了基本的環境配置，下面則需要為實體類中屬性添加@Field注解標識。

一般我們定義的實體類屬性名稱和數據庫的字段名稱相似，但是，如果使用了Solr搜索，每次查詢數據將不再查詢數據庫，那么Solr怎么獲取到你要查詢的是商品的title還是price呢？

這里就需要使用@Field注解，保證實體類屬性名稱和Solr索引庫中定義的Field域名稱對應，如果當前屬性名稱和Solr索引庫域Field名稱相同，就添加@Field名稱，如果不相同就添加@Field("域名稱")注解。

這里我們這樣定義實體類 Goods

public class Goods implements Serializable{@Fieldprivate Long id; //商品ID@Field("item_title")private String title; //商品標題@Field("item_price")private String price; //商品價格@Field("item_image")private String image; //商品圖片@Field("item_category")private String category; //商品類別@Field("item_brand")private String brand; //商品品牌@Field("item_seller")private String seller; //商品賣家 }

注意：溫馨提示一下，大家創建實體類的時候盡量養成一個習慣：實現Serializable序列化接口。不序列化遲早會遇到問題。

實例

本例詳細代碼請參看: Github

由于我們創建的是測試類，需要使用@RunWith和@ContextConfiguration注解加載配置文件。

在測試類中用注入Spring Data Solr操作Solr索引庫的核心類SolrTemplate

@Autowired private SolrTemplate solrTemplate;

添加

@Test public void testAdd() {Goods goods = new Goods(1L, "IPhone SE", "120", "手機", "Apple", "Apple");solrTemplate.saveBean(goods);solrTemplate.commit(); //提交 }

實現數據的添加：

實例化一個實體類，并添加數據。

調用solrTemplate的saveBean()方法；這個saveBean()是用來添加普通對象類型數據到Solr索引庫的，如果是List集合這種類型，使用saveBeans()方法。

調用solrTemplate的commit()方法，提交更改；類似于我們請求數據庫時需要關閉連接一樣，必須調用commit()方法才能保存修改。

按主鍵查詢

@Test public void testFindById() {Goods goods = solrTemplate.getById(1, Goods.class);System.out.println("--------" + goods.getTitle()); }

按主鍵刪除

@Test public void testDeleteById() {solrTemplate.deleteById("1");solrTemplate.commit(); //提交 }

批量插入數據

@Test public void testAddList() {List<Goods> list = new ArrayList<Goods>();//循環插入100條數據for (int i = 0; i < 100; i++) {Goods goods = new Goods(i + 1L, "華為Mate" + i, String.valueOf(2000 + i), "手機", "手機", "華為專賣店");list.add(goods);}solrTemplate.saveBeans(list); //添加集合對象，調用saveBeans()；添加普通對象類型數據，使用saveBean();solrTemplate.commit(); //提交 }

分頁查詢

@Test public void testPageQuery() {Query query = new SimpleQuery("*:*");query.setOffset(20); //開始索引（默認0）query.setRows(20); //每頁記錄數（默認10）ScoredPage<Goods> page = solrTemplate.queryForPage(query, Goods.class);System.out.println("總記錄數：" + page.getTotalElements());List<Goods> list = page.getContent(); }

上面使用new SimpleQuery方式是聲明一個Query實例，而("*:*")表示查詢Solr索引庫中的所有數據。Solr默認查詢的數據是前十條記錄，也就是即便使用了("*:*")查詢，也僅僅是查詢到十條記錄。不過Solr提供了分頁查詢的方法：setOffset()設置開始索引位置，setRows()設置結束索引位置（默認10）；調用solrTemplate.queryForPage(query, clazz)即是分頁查詢。

分頁查詢到的結果存儲在page對象中，使用page.getTotalElements()可以獲取到查詢的總記錄數，使用page.getContent()獲取到查詢的數據。

條件查詢

@Test public void testPageQueryMutil() {Query query = new SimpleQuery("*:*");Criteria criteria = new Criteria("item_title").contains("2");criteria = criteria.and("item_title").contains("5");query.addCriteria(criteria);ScoredPage<Goods> page = solrTemplate.queryForPage(query, Goods.class);System.out.println("總記錄數：" + page.getTotalElements());List<Goods> list = page.getContent(); }

如上，使用分頁插件需要實例化Criteria類添加查詢條件，查詢是根據schema.xml中定義的Field域名稱查詢的，相當于根據數據庫的字段名稱查詢一樣。

刪除所有

@Test public void deleteAll(){Query query = new SimpleQuery("*:*");solrTemplate.delete(query); }

交流

如果大家有興趣，歡迎大家加入我的Java交流群：671017003 ，一起交流學習Java技術。博主目前一直在自學JAVA中，技術有限，如果可以，會盡力給大家提供一些幫助，或是一些學習方法，當然群里的大佬都會積極給新手答疑的。所以，別猶豫，快來加入我們吧！

聯系

If you have some questions after you see this article, you can contact me or you can find some info by clicking these links.

[Blog@TyCoding's blog](http://www.tycoding.cn)
[GitHub@TyCoding](https://github.com/TyCoding)
[ZhiHu@TyCoding](https://www.zhihu.com/people/tomo-83-82/activities)

轉載于:https://my.oschina.net/u/3955926/blog/2208590

總結

以上是生活随笔為你收集整理的Solr及Spring-Data-Solr入门学习的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。

上一篇： ACM-ICPC 2018 徐州赛区网络
下一篇： JS面向对象的程序设计之继承-继承的实现