程序包 com.hankcs.hanlp.classification.tokenizers

接口概要

接口	说明
ITokenizer

类概要

类	说明
BigramTokenizer
BlankTokenizer	使用\\s（如空白符）进行切分的分词器
CharTable	字符正规化表
CharType
HanLPTokenizer