×

中文分词处理方法

admin admin 发表于2016-03-08 19:57:02 浏览1839 评论0

抢沙发发表评论

<?php

/**
 * 中文分词处理方法
 *+---------------------------------
 * @author Nzing
 * @access public
 * @version 1.0
 *+---------------------------------
 * @param stirng  $string 要处理的字符串
 * @param boolers $sort=false 根据value进行倒序
 * @param Numbers $top=0 返回指定数量,默认返回全部
 *+---------------------------------
 * @return void
 */
function scws($text, $top = 5, $return_array = false, $sep = ',') {
    include('./pscws4/pscws4.php');
    $cws = new pscws4('utf-8');
    $cws -> set_charset('utf-8');
    $cws -> set_dict('./pscws4/etc/dict.utf8.xdb');
    $cws -> set_rule('./pscws4/etc/rules.utf8.ini');
    $cws->set_multi(3);
    $cws -> set_ignore(true);
    //$cws->set_debug(true);
    //$cws->set_duality(true);
    $cws -> send_text($text);
    $ret = $cws -> get_tops($top, 'r,v,p');
    $result = null;
    foreach ($ret as $value) {
        if (false === $return_array) {
            $result .= $sep . $value['word'];
        } else {
            $result[] = $value['word'];
        }
    }
    return false === $return_array ? substr($result, 1) : $result;
}
print_r(scws('[直播员]腾讯新闻: 王毅:多年来,外界对中非合作有各种各样的议论。但非洲自己最有发言权。在去年的中非峰会上,很多非洲领导人都公开表示,中国从来没有殖民过非洲,而是帮助非洲摆脱贫困,实现发展,为非洲带来了新生。非洲一直在寻找一位有着共同利益和真正可靠的合作伙伴,最终找到了中国。他们的发言在现场引发强烈的共鸣,我认为这真正代表了广大非洲人民的心声。'));


源码共享:

pscws4.zip


分享到:

群贤毕至

访客