1、Nutch簡介 　　Nutch是一個由Java實現的，開放源代碼（open-source）的web搜索引擎。主要用於收集網頁數據，然后對其進行分析，建立索引，以提供相應的接口來對其網頁數據進行查詢的一套工具。其底層使用了Hadoop來做分布式計算與存儲，索引使用了Solr分布式索引框架來做 ...

1、Nutch命令詳解 Nutch采用了一種命令的方式進行工作，其命令可以是對局域網方式的單一命令也可以是對整個Web進行爬取的分步命令。 要看Nutch的命令說明，可執行"Nutch"命令。 下面是單個命令的說明： crawl ...

1、環境准備 1.1 本期引言 前三期分別介紹了Nutch與Solr在Linux上面的安裝，並做了簡單的應用，這一期從開發的角度進行，因為我們日常最熟悉的開發環境是Windows，所以本期詳細介紹Windows平台的Nutch二次開發所需要進行的配置安裝。當我們開發好之后，最后在部署 ...

1、Solr簡介 　　Solr是一個高性能，采用Java5開發，基於Lucene的全文搜索服務器。同時對其進行了擴展，提供了比Lucene更為豐富的查詢語言，同時實現了可配置、可擴展並對查詢性能進行了優化，並且提供了一個完善的功能管理界面，是一款非常優秀的全文搜索引擎。 　　Solr最初 ...

官方文檔：nutch+hadoop 　　　　　　nutch+solr 版本： nutch：nutch1.6 solr： solr3.6.2 可以參照hadoop1.0.4+nutch1.6“單機”配置 一，ant編譯nutch 下載 ...

搜索引擎是我日常工作中用得最多的一款工具，國內常用的搜索引擎包括Baidu，sougou，bing等。但我本篇要紀錄的並不是這些常用的搜索引擎，而是信息安全從業人員必備的幾款網絡搜索引擎。本篇要介紹的搜索引擎包括：Shodan，censys，鍾馗之眼，Google，FoFa，Dnsdb ...

版本： eclipse： 　　eclipse-jee-juno-SR2-linux-gtk 　　tomcat7： apache-tomcat-7.0.39 ...

lucene 和 es 的前世今生 lucene 是最先進、功能最強大的搜索庫。如果直接基於 lucene 開發，非常復雜，即便寫一些簡單的功能，也要寫大量的 Java 代碼，需要深入理解原理。 elasticsearch 基於 lucene，隱藏了 lucene 的復雜性，提供了簡單易用 ...