PHPAnalysis中文分词类详解


Posted in PHP onJune 13, 2014

PHPAnalysis是目前广泛使用的中文分词类,使用反向匹配模式分词,因此兼容编码更广泛,现将其变量与常用函数详解如下:

一、比较重要的成员变量

$resultType   = 1        生成的分词结果数据类型(1 为全部, 2为 词典词汇及单个中日韩简繁字符及英文, 3 为词典词汇及英文)
                                    这个变量一般用 SetResultType( $rstype ) 这方法进行设置。
$notSplitLen  = 5        切分句子最短长度
$toLower      = false    把英文单词全部转小写
$differMax    = false    使用最大切分模式对二元词进行消岐
$unitWord     = true     尝试合并单字(即是新词识别)
$differFreq   = false    使用热门词优先模式进行消岐

二、主要成员函数列表

1、public function __construct($source_charset='utf-8', $target_charset='utf-8', $load_all=true, $source='')
函数说明:构造函数
参数列表:
$source_charset      源字符串编码
$target_charset      目录字符串编码
$load_all            是否完全加载词典(此参数已经作废)
$source              源字符串
如果输入输出都是utf-8,实际上可以不必使用任何参数进行初始化,而是通过 SetSource 方法设置要操作的文本

2、public function SetSource( $source, $source_charset='utf-8', $target_charset='utf-8' )
函数说明:设置源字符串
参数列表:
$source              源字符串
$source_charset      源字符串编码
$target_charset      目录字符串编码
返回值:bool

3、public function StartAnalysis($optimize=true)
函数说明:开始执行分词操作
参数列表:
$optimize            分词后是否尝试优化结果
返回值:void
一个基本的分词过程:
//////////////////////////////////////
$pa = new PhpAnalysis();

$pa->SetSource('需要进行分词的字符串');

//设置分词属性
$pa->resultType = 2;
$pa->differMax  = true;

$pa->StartAnalysis();

//获取你想要的结果
$pa->GetFinallyIndex();
////////////////////////////////////////

4、public function SetResultType( $rstype )
函数说明:设置返回结果的类型
实际是对成员变量$resultType的操作
参数 $rstype 值为:
1 为全部, 2为 词典词汇及单个中日韩简繁字符及英文, 3 为词典词汇及英文
返回值:void

5、public function GetFinallyKeywords( $num = 10 )
函数说明:获取出现频率最高的指定词条数(通常用于提取文档关键字)
参数列表:
$num = 10  返回词条个数
返回值:用","分隔的关键字列表

6、public function GetFinallyResult($spword=' ')
函数说明:获得最终分词结果
参数列表:
$spword    词条之间的分隔符
返回值:string

7、public function GetSimpleResult()
函数说明:获得粗分结果
返回值:array

8、public function GetSimpleResultAll()
函数说明:获得包含属性信息的粗分结果
属性(1中文词句、2 ANSI词汇(包括全角),3 ANSI标点符号(包括全角),4数字(包括全角),5 中文标点或无法识别字符)
返回值:array

9、public function GetFinallyIndex()
函数说明:获取hash索引数组
返回值:array('word'=>count,...) 按出现频率排序

10、public function MakeDict( $source_file, $target_file='' )
函数说明:把文本文件词库编译成词典
参数列表:
$source_file   源文本文件
$target_file   目标文件(如果不指定,则为当前词典)
返回值:void

11、public function ExportDict( $targetfile )
函数说明:导出当前词典全部词条为文本文件
参数列表:
$targetfile  目标文件
返回值:void

PHP 相关文章推荐
php创建多级目录代码
Jun 05 PHP
php array_map array_multisort 高效处理多维数组排序
Jun 11 PHP
PHP 批量更新网页内容实现代码
Jan 05 PHP
php array_push()数组函数:将一个或多个单元压入数组的末尾(入栈)
Jul 12 PHP
使用ThinkPHP自带的Http类下载远程图片到本地的实现代码
Aug 02 PHP
PHP中的错误处理、异常处理机制分析
May 07 PHP
3个PHP多维数组转为一维数组的方法实例
Mar 13 PHP
PHP生成自定义长度随机字符串的函数分享
May 04 PHP
PHP实现的多文件上传类及用法示例
May 06 PHP
php简单的上传类分享
May 15 PHP
PDO::rollBack讲解
Jan 29 PHP
聊聊 PHP 8 新特性 Attributes
Aug 19 PHP
ThinkPHP缓存方法S()概述
Jun 13 #PHP
采用ThinkPHP中F方法实现快速缓存实例
Jun 13 #PHP
浅析ThinkPHP中execute和query方法的区别
Jun 13 #PHP
采用thinkphp自带方法生成静态html文件详解
Jun 13 #PHP
PHP中使用gettext解决国际化问题的例子(i18n)
Jun 13 #PHP
Yii结合CKEditor实现图片上传功能
Jun 13 #PHP
在Yii框架中使用PHP模板引擎Twig的例子
Jun 13 #PHP
You might like
使用PHPExcel操作Excel用法实例分析
2015/03/26 PHP
详解php用curl调用接口方法,get和post两种方式
2017/01/13 PHP
PHP全局使用Laravel辅助函数dd
2019/12/26 PHP
在 IE 中调用 javascript 打开 Excel 表
2006/12/21 Javascript
常用的javascript function代码
2008/05/23 Javascript
jquery星级插件、支持页面中多次使用
2012/03/25 Javascript
原生Javascript封装的一个AJAX函数分享
2014/10/11 Javascript
javascript实现window.print()去除页眉页脚
2014/12/30 Javascript
JavaScript使用指针操作实现约瑟夫问题实例
2015/04/07 Javascript
全面解析Bootstrap手风琴效果
2020/04/17 Javascript
JavaScript缓冲运动实现方法(2则示例)
2016/01/08 Javascript
bootstrap flask登录页面编写实例
2016/11/01 Javascript
最细致的vue.js基础语法 值得收藏!
2016/11/03 Javascript
微信小程序模板之分页滑动栏
2017/02/10 Javascript
JavaScript中无法通过div.style.left获取值的解决方法
2017/02/19 Javascript
JS表单提交验证、input(type=number) 去三角 刷新验证码
2017/06/21 Javascript
详解React-Native全球化多语言切换工具库react-native-i18n
2017/11/03 Javascript
js实现鼠标单击Tab表单切换效果
2018/05/16 Javascript
AngularJS实现动态切换样式的方法分析
2018/06/26 Javascript
JavaScript实现的拼图算法分析
2019/02/13 Javascript
node中使用log4js4.x版本记录日志的方法
2019/08/20 Javascript
django 修改server端口号的方法
2018/05/14 Python
浅谈python写入大量文件的问题
2018/11/09 Python
python机器人运动范围问题的解答
2019/04/29 Python
pycharm如何设置官方中文(如何汉化)
2020/12/29 Python
护理学专业推荐信
2013/12/03 职场文书
歌唱比赛获奖感言
2014/01/21 职场文书
十一酒店活动方案
2014/02/20 职场文书
行政办公室岗位职责
2014/03/18 职场文书
函授本科个人自我鉴定
2014/03/25 职场文书
读书活动总结
2014/04/28 职场文书
夫妻房产协议书的格式
2014/10/11 职场文书
新教师个人工作总结
2015/02/06 职场文书
转正申请报告格式
2015/05/15 职场文书
2016年十一促销广告语
2016/01/28 职场文书
《我们的民族小学》教学反思
2016/02/19 职场文书