前言
Tesseract-Ocr是我在編寫爬蟲項目中,用來識別圖片(不是驗證碼)的本地解決方案(因為客戶不想使用API識別,太貴),識別率目前達到了100%,可以說是相當了得,當然了,這取決於使用的traineddata
。
簡介
Tesseract最初是在1985年至1994年間在Hewlett-Packard Laboratories Bristol和Greeley Colorado的Hewlett-Packard Co開發的,1996年進行了一些更改,移植到Windows,並且隨着C++在1998年興起。2005年Tesseract由惠普開源,然后從2006年至今,由谷歌繼續開發。
Tesseract-Ocr並不是一個軟件,它是一個軟件包,包含了一個OCR引擎【libtesseract】和一個命令行程序 【tesseract】。Tesseract 4增加了一個基於OCR引擎的新神經網絡(LSTM),該引擎專注於行級識別,但仍然支持Tesseract 3的傳統Tesseract OCR引擎,該引擎通過識別字符模式來工作。
要啟用與Tesseract 3的兼容性,你需要使用Legacy OCR Engine模式(--oem 0)。它還需要支持傳統引擎的traineddata(訓練好的數據文件),這些文件可以從tessdata存儲庫的文件獲取。
Tesseract支持識別unicode(UTF-8),可以“開箱即用”識別100多種語言。
Tesseract支持多種輸出格式:純文本,hOCR(HTML),PDF,TSV。主分支還具有ALTO(XML)輸出的實驗支持。
⭐️⭐️⭐️ 具體介紹可以上tesseract-wiki查看。
在Java上使用
創建項目,並引入Jar包
Maven
<!-- https://mvnrepository.com/artifact/net.sourceforge.tess4j/tess4j -->
<dependency>
<groupId>net.sourceforge.tess4j</groupId>
<artifactId>tess4j</artifactId>
<version>4.3.1</version>
</dependency>
Gradle
compile 'net.sourceforge.tess4j:tess4j:4.3.1'
導入traineddata
traineddata
是使用Tesseract-Ocr
訓練好的數據文件,可以直接使用。這些文件你可以去tessdata存儲庫查找,也可以去谷歌搜索,當然了,你也可以自己訓練😂。
traineddata
通常以*.traineddata
命名,其中*指的是支持的語言類型。在這里你可以看到4.0.0版本支持的語言以及traineddata
列表。
這次,我們選擇eng.traineddata
進行測試。下載eng.traineddata放入/resources/traineddata
目錄。
編寫測試代碼
初始化Tesseract引擎
public class TesseractTest {
private ITesseract tesseract;
@Before
public void init() {
tesseract = new Tesseract();
System.out.println("tesseract init done...");
}
}
實際上,上面的代碼是無法正常運行的,因為找不到指定語言版本的traineddata
文件。
net.sourceforge.tess4j:tess4j:4.1.1
提供的API並不好,在Tesseract
構造函數中,沒有提供可選參數的構造器。
public class Tesseract implements ITesseract {
// Tesseract使用的語言版本,用以選擇traineddata
private String language = "eng";
// traineddata目錄,里面放*.traineddata數據文件
private String datapath;
// 省略其他代碼 ...
public Tesseract() {
try {
// 默認從系統環境變量獲取traineddata目錄
datapath = System.getenv("TESSDATA_PREFIX");
} catch (Exception e) {
// ignore
} finally {
if (datapath == null) {
datapath = "./";
}
}
}
/**
* Sets language for OCR.
*
* @param language the language code, which follows ISO 639-3 standard.
*/
@Override
public void setLanguage(String language) {
this.language = language;
}
/**
* Sets path to <code>tessdata</code>.
*
* @param datapath the tessdata path to set
*/
@Override
public void setDatapath(String datapath) {
this.datapath = datapath;
}
// 省略其他代碼 ...
}
所以,我們可以選擇設置環境變量TESSDATA_PREFIX
為數據目錄,或者通過Java編碼的方式來設置。
tesseract.setLanguage("eng"); // 默認就是eng,你可以選擇其他lang
tesseract.setDatapath(TesseractTest.class.getResource("/traineddata").getPath().substring(1));
OCR識別測試
tesseract
提供了一系列doOcr
方法的重載,我們可以方便的進行OCR識別。
String doOCR(File imageFile) throws TesseractException;
String doOCR(File imageFile, Rectangle rect) throws TesseractException;
String doOCR(BufferedImage bi) throws TesseractException;
String doOCR(BufferedImage bi, Rectangle rect) throws TesseractException;
String doOCR(List<IIOImage> imageList, Rectangle rect) throws TesseractException;
String doOCR(List<IIOImage> imageList, String filename, Rectangle rect) throws TesseractException;
String doOCR(int xsize, int ysize, ByteBuffer buf, Rectangle rect, int bpp) throws TesseractException;
String doOCR(int xsize, int ysize, ByteBuffer buf, String filename, Rectangle rect, int bpp) throws TesseractException;
可以看出,doOcr
方法支持多種圖片識別方式,如圖片文件、多個圖片文件、圖片文件局部處理等等方式。
為了方便測試,我們選取最簡單的圖片文件方式測試。
圖片是個URL鏈接,如下所示
@Test
public void testOcr() throws IOException, TesseractException {
BufferedImage image = ImageIO.read(new URL("http://static8.ziroom.com/phoenix/pc/images/price/aacd14fbc53a106c7f0f0d667535683as.png"));
String ocr = tesseract.doOCR(image);
System.out.println("ocr result : " + ocr);
}
控制台輸出:
tesseract init done...
ocr result : 2710386495
識別准確率,主要在於你選擇的訓練數據文件,我使用的是數據文件是這個,對於數字的准確率基本上是100%。
異常
如果你遭遇Invalid memory access
異常,這是由於找不到對應lang的*.traineddata
文件,請修改language
和datapath
。
Invalid memory access
java.lang.Error: Invalid memory access
at com.sun.jna.Native.invokePointer(Native Method)
at com.sun.jna.Function.invokePointer(Function.java:470)
at com.sun.jna.Function.invoke(Function.java:404)
at com.sun.jna.Function.invoke(Function.java:315)
at com.sun.jna.Library$Handler.invoke(Library.java:212)
at com.sun.proxy.$Proxy9.TessBaseAPIGetUTF8Text(Unknown Source)
at net.sourceforge.tess4j.Tesseract.getOCRText(Tesseract.java:495)
at net.sourceforge.tess4j.Tesseract.doOCR(Tesseract.java:321)
at net.sourceforge.tess4j.Tesseract.doOCR(Tesseract.java:293)
at net.sourceforge.tess4j.Tesseract.doOCR(Tesseract.java:274)
at net.sourceforge.tess4j.Tesseract.doOCR(Tesseract.java:258)
...
訓練工具
https://github.com/tesseract-ocr/tesseract/wiki/AddOns
訓練數據倉庫
- tessdata_best:基於LSTM引擎的訓練數據,最佳最准確的
- tessdata_fast:基於LSTM引擎的訓練數據,快速(精簡)版本
- tessdata:支持雙引擎(LSTM和傳統引擎),但LSTM訓練數據不是最新的版本
推薦使用tessdata_best,雖然識別速度相對於tessdata_fast稍慢,但是准確率可以保證。