N元模型示例程序

提示：得到源码后，先执行跟目录下的 admin/run.sh 进入docker容器服务。然后在容器内进行下述步骤。

该演示项目基于开源项目kenlm。

生成模型文件

./gen_model.sh

数据文件 data/ngrams.train.tokens 是训练n-grams模型的输入数据。程序执行结束后，将得到 ngrams.arpa.gz文件。

python lm.py Test.test_prob

python lm.py Test.test_perplexity