This commit is contained in:
Sun Junyi 2013-04-22 13:27:00 +08:00
commit 7337c6d420

View File

@ -120,11 +120,11 @@ Output:
功能 5) : 并行分词 功能 5) : 并行分词
================== ==================
* 将目标文本按行分隔后把各行文本分配到多个python进程并行分词然后归并结果从而获得分词速度的可观提升 * 原理:将目标文本按行分隔后把各行文本分配到多个python进程并行分词然后归并结果从而获得分词速度的可观提升
* 基于python自带的multiprocessing模块目前暂不支持windows * 基于python自带的multiprocessing模块目前暂不支持windows
* 用法: * 用法:
* jieba.enable_parallel(4) # 开启并行分词模式,参数为并行进程数 * `jieba.enable_parallel(4)` # 开启并行分词模式,参数为并行进程数
* jieba.disable_parallel() # 关闭并行分词模式 * `jieba.disable_parallel()` # 关闭并行分词模式
* 例子: * 例子:
https://github.com/fxsjy/jieba/blob/master/test/parallel/test_file.py https://github.com/fxsjy/jieba/blob/master/test/parallel/test_file.py