单词分割

单词分割技术资料下载专区,收录500份相关技术文档、开发源码、电路图纸等优质工程师资源,全部免费下载。

资源总数
500

单词分割 热门资料

查看全部 500 份 →

简单的汉语分词算法,由于本人水平有限,因此功能不是很完全,但能实现一些简单分词,请高手继续补充。

2013-12-16 133 单词分割

词法分析是编制一个读单词的过程,从输入的源程序中,识别出各个具有独立意义的单词,即基本保留字、标识符、常数、运算符、分隔符五大类。并依次输出各个单词的内部编码及单词符号自身值。程序语言的单词符号一般分为五种:关键字(保留字/基本字)if、w...

2016-05-31 55 单词分割