一、安裝
1.下載地址:https://github.com/kpu/kenlm
2.unzip mv mkdir -p build
3.進入到build目錄下 cmake ..
(1) ubuntu cmake找不到boost庫 sudo apt-get install libboost-all-dev
4. make -j 4
成功
二、使用
1. 創建mymodel 和 corpus目錄
2. 執行命令 ./build/bin/lmplz -o 3 --verbose_header --text ./corpus/test.txt --arpa ./mymodel/log.arpa
(1)test.txt 語料txt 、log.arpa 模型名稱
3. 壓縮 ./build/bin/build_binary -s ./mymodel/log.arpa ./mymodel/log.bin
4. pip install https://github.com/kpu/kenlm/archive/master.zip
5. lm = kenlm.Model('') lm.score("句子")