在ssh中利用Solr服務建立的界面化站內搜索---solr2

     繼上次匆匆搭建起結合solr和nutch的所謂站內搜索引擎之后，雖當時心中興奮不已，可是看了看百度，再只能看看我的控制台的打印出每個索引項的幾行文字，哦，好像差距還是有點大……

 

     簡陋的信息顯示環境最起碼給了我一個信號，這條路沒有走錯，好吧，讓我們來繼續探索搜索引擎的奧秘吧。

 

     上期回顧：上次主要是介紹了solrj，通過solrj的api與solr服務器進行通信，獲取服務器上的索引數據以及在編寫程序中遇到的一些問題和解決方法。本期主要是建立與solr服務器的通信，提供搜索界面輸入關鍵字或搜索規則，根據關鍵字或規則到索引數據中尋找匹配項並返回結果到界面上。

 

    1.本篇的前提是你已經配置好nutch以及solr，並通過網頁爬取將索引數據存放到了solr服務器中（solr可以可以部署到tomcat的下也可以不部署，另外我的所有搭建都是在Ubuntu環境下），我配置了中文分詞器，以上工作可以在網上搜，資料很多，過程中也有很多錯誤需要解決，如果有時間我會對這塊做個總結，solr服務器的界面如下：

 

接下來就是要做一個搜索界面，基於是一個純所搜引擎，所以提供一個招牌、一個輸入框以及一個確認按鈕即可，關於招牌定什么，問過朋友，有吸引眼球的千度、谷哥哥，一看就是要和度娘們叫板，算了咱不干以卵擊石的事，還是有點自知之明的好，最終還是叫“jiesearch”吧——小眾，不矯情。這塊不涉及什么代碼量，所以就多扯了幾句，界面如下：

 

    2.針對上次主題代碼進行完善，因為上次返回的是一個SolrDocumentList 對象，不能直接轉換為到jsp頁面顯示的list集合，所以借鑒網上前輩們的指點對代碼進行了改寫。

 //首先定義HttpSolrServer對象，用於程序連接solr

public class SolrServer {
private static SolrServer solrServer = null;
private static HttpSolrServer server=null;
private static String url="http://solrIP:8080/solr";

public static synchronized SolrServer getInstance() {
     if (solrServer==null){
         solrServer=new SolrServer();
       }
        return solrServer;
}
public static HttpSolrServer getServer(){
    try {
        if(server==null){
            server = new HttpSolrServer(url);
            server.setSoTimeout(1000); // socket read timeout
            server.setConnectionTimeout(1000);
            server.setDefaultMaxConnectionsPerHost(100);
            server.setMaxTotalConnections(100);
            server.setFollowRedirects(false); // defaults to false
            //allowCompression defaults to false.
            //Server side must support gzip or deflate for this to have any effect.
            server.setAllowCompression(true);
            server.setMaxRetries(1); // defaults to 0. > 1 not recommended.
            }
      } catch (Exception e) {
            // TODO Auto-generated catch block
            e.printStackTrace();
        }
    return server;
    }
}

 

 

//然后定義一個實體類BlogsDo用於接收和配置索引的各個字段

@Entity
@Table(name="blogs")
public class BlogsDO implements Serializable{
    private static final long serialVersionUID = -4721368786493126226L;
    @Field("Id")
    private String id;
    @Field("content")
    private String content;
    @Field("title")
    private String title;
    @Field("url")
    private String url;
    @Field("_version_")
    private String _version_;
    public String getId() {
        return id;
    }
    public void setId(String id) {
        this.id = id;
    }
    public String getContent() {
        return content;
    }
    public void setContent(String content) {
        this.content = content;
     }
    public String getTitle() {
        return title;
    }
    public void setTitle(String title) {
        this.title = title;
    }
    public String getUrl() {
        return url;
    }
    public void setUrl(String url) {
        this.url = url;
    }
    public String get_version_() {
        return _version_;
    }
    public void set_version_(String version) {
        _version_ = version;
    }
    public static long getSerialversionuid() {
        return serialVersionUID;
    }
}

 

備注：這些字段相應的都應該在schema.xml中存在<fields></fields>之間，如下所示，另外個人理解，對於實體類上的注解    @Field("")應該也是一種映射，就是將實體類的字段與配置文件中的選項相對應。

<field name="id" type="string" stored="true" indexed="true"/>
<field name="_version_" type="long" indexed="true" stored="true"/> 
<!-- fields for index-basic plugin -->
<field name="url" type="url" stored="true" indexed="true"required="true"/>
<field name="content" type="text" stored="true" indexed="true"/>
<field name="title" type="text" stored="true" indexed="true"/>

 

//添加查詢規則以及是否高亮的設置以及結果的返回與接收

String searchWord=request.getParameter("searchText");
List<BlogsDO> blogList=new ArrayList<BlogsDO>();
BlogsDO blogsDO=null;
HttpSolrServer solrServer= SolrServer.getInstance().getServer();
SolrQuery sQuery = new SolrQuery();
String para="";
Page page=null;
para="content:"+searchWord+"";

logger.info("para:"+para);
sQuery.setQuery(para);
sQuery.setStart(0);
sQuery.setRows(10);
//設置高亮
sQuery.setHighlight(true); // 開啟高亮組件
sQuery.addHighlightField("content");// 高亮字段
sQuery.addHighlightField("title");// 高亮字段
sQuery.setHighlightSimplePre("<font color='red'>");//標記，高亮關鍵字前綴
sQuery.setHighlightSimplePost("</font>");//后綴
sQuery.setHighlightSnippets(2);//結果分片數，默認為1
sQuery.setHighlightFragsize(1000);//每個分片的最大長度，默認為100

//分片信息
sQuery.setFacet(true)
.setFacetMinCount(1)
.setFacetLimit(5)//段
.addFacetField("content");//分片字段

long startSearch=System.currentTimeMillis();
Integer counts=0;
try {
    QueryResponse response = solrServer.query(sQuery);
    SolrDocumentList list = response.getResults();
    counts=(int) list.getNumFound();//搜索數量
    logger.info("counts:"+counts);
    //獲取所有高亮的字段
    Map<String,Map<String,List<String>>> highlightMap=response.getHighlighting();
    String blogId="";
    for (SolrDocument solrDocument : list) {
    blogsDO=new BlogsDO();
    blogId=(String) solrDocument.getFieldValue("id").toString();
    blogsDO.setId(blogId);
    blogsDO.set_version_(solrDocument.getFieldValue("_version_").toString());
    blogsDO.setUrl(solrDocument.getFieldValue("url").toString());

    List<String> titleList=highlightMap.get(blogId).get("title");
    List<String> contentList=highlightMap.get(blogId).get("content");
    if(titleList!=null && titleList.size()>0){
        blogsDO.setTitle(titleList.get(0));
    }else{
    //獲取並設置高亮的字段title
    blogsDO.setTitle(solrDocument.getFieldValue("title").toString());
    }
    if(contentList!=null && contentList.size()>0){
        blogsDO.setContent(contentList.get(0));
     }else{
    //獲取並設置高亮的字段content
        blogsDO.setContent(solrDocument.getFieldValue("content").toString());
    }
    blogList.add(blogsDO);
    }
} catch (SolrServerException e) {
    e.printStackTrace();
}
long endSearch=System.currentTimeMillis();
model.addObject("time", (double)(endSearch-startSearch)/1000);
model.addObject("counts", counts);
model.addObject("blogList", blogList);

 

3.下面要做的就是在前台jsp頁面中接收list集合和傳過去的counts（搜索結果個數），time(搜索耗時)並相應的調整界面布局即可，效果如下：

 

     至此一個搜索引擎做的算是有點模樣了，下一步如果還有時間可以對本地文檔圖片等建立索引並實現搜索功能。

 

    另外最近我在看大數據可視化方面的東西，如果有興趣有見解的可以交流下

郵箱：[e-mail]

文中如有不足和錯誤還請指正！

 

    參考博文：http://blog.csdn.net/chunming8302/article/details/7321501

 

友情贊助

如果你覺得博主的文章對你那么一點小幫助，恰巧你又有想打賞博主的小沖動，那么事不宜遲，趕緊掃一掃，小額地贊助下，攢個奶粉錢，也是讓博主有動力繼續努力，寫出更好的文章^^。

　　　　1. 支付寶　　　　　　　　　　　　　　　　　　　　　　　　　　2. 微信