关于分词,如今有不少解决方法,根据本身须要进行选择。项目中用到了 SCWS ,安装好记录下。php
SCWS 是 Simple Chinese Word Segmentation 的首字母缩写(即:简易中文分词系统)。
这是一套基于词频词典的机械式中文分词引擎,它能将一整段的中文文本基本正确地切分红词。
如上,SCWS 是一套分词系统。虽然这套系统可能有些过期,算法不是很精确,但在某些特定场合仍是比较实用的算法
首先根据本身的 PHP 版本,下载相应的扩展。
下载完成后,将 php_scws.dll 放到 PHP 安装目录的 etc/ 下。windows
首先新建目录,用于存放规则集文件和词典文件。如:D:/scws/ 。
而后在这里下载规则集文件,下载后解压,将 etc/ 目录中的 *.ini 文件放到 D:/scws/ 中。
接着在这里下载词典文件,将 *.xdb 文件放到 D:/scws/ 中。测试
在 pnp.ini 中添加 extension=php_scws.dll,同时能够写上配置参数:scws.default.fpath = "D:/scws/" 。.net
到此若是一切顺利便安装成功,下面进行测试code
<?php $string = '安能摧眉折腰事权贵,使我不得开心颜'; $data = ''; $obj = scws_new(); $obj->set_charset('utf8'); $obj->add_dict(ini_get('scws.default.fpath') . '/dict.utf8.xdb'); $obj->set_rule(ini_get('scws.default.fpath') . '/rules.utf8.ini'); $obj->set_duality(true); $obj->set_ignore(true); $obj->set_multi(2); $obj->send_text($string); $array = $obj->get_result(); foreach ($array as $key => $value) { $data .= $value['word'] . ','; } echo rtrim($data, ',');// 安能,摧眉折腰,摧眉,眉折,折腰,事,权贵,使我,我,不得,开心,颜
参考资料:SCWS、SCWS分词扩展在windows下的安装方法。blog