run.sh

一个基于PERL的语言处理工具包. 其中包含文本处理,词汇过滤及一个英语词汇词法处理工具(STEMMER),适用于处理一些基本的.TXT文件.

perl code/convert_data.pl data/jobs/ code/stopwords 100 > data/temp/job_1.out
perl code/eng_morph.pl data/temp/job_1.out code/eng_morph_table > data/temp/job_2.out