XSTokenizer
包 | XS.tokenizer |
---|---|
继承关系 | interface XSTokenizer |
子类 | XSTokenizerFull, XSTokenizerNone, XSTokenizerScws, XSTokenizerSplit, XSTokenizerXlen, XSTokenizerXstep |
版本 | 1.0.0 |
源代码 | sdk/php/lib/XSTokenizer.class.php |
自定义字段词法分析器接口
系统将按照 getTokens 返回的词汇列表对相应的字段建立索引
方法明细
getTokens()
方法
abstract public array getTokens(string $value, XSDocument $doc=NULL)
| ||
$value | string | 待分词的字段值(UTF-8编码) |
$doc | XSDocument | 当前相关的索引文档 |
{return} | array | 切好的词组成的数组 |
源码: sdk/php/lib/XSTokenizer.class.php#L33 (显示)
public function getTokens($value, XSDocument $doc = null);
执行分词并返回词列表