initsearch.java

nutch搜索的改进型工具和优化爬虫的相关工具

/*
 * 创建日期 2005-3-4
 *
 * TODO 要更改此生成的文件的模板，请转至
 * 窗口 － 首选项 － Java － 代码样式 － 代码模板
 */
package net.nutch.util;

import kit.nlp.util.*;
/**
 * @author Administrator
 *
 * TODO 要更改此生成的类型注释的模板，请转至
 * 窗口 － 首选项 － Java － 代码样式 － 代码模板
 */
public class InitSearch {
	public void loadData() throws Exception{
		//System.out.println("Load dict begin ....");
		//WordsSegment.InitWordsSegment(3);
		//System.out.println("Load dict end.");
		System.out.println("Load Stopwords begin ...");
		Stopwords.loadStopwords("stopwords.txt");
		Stopwords.loadSymbol("symbol.txt");
		Stopwords.loadHighFreq("highfreq.txt");
		System.out.println("Load Stopwords end .");
	}
	
	public void loadData(String stopword) throws Exception{
		//System.out.println("Load dict begin ....");
		//WordsSegment.InitWordsSegment(3);
		//System.out.println("Load dict end.");
		System.out.println("Load Stopwords begin ...");
		Stopwords.loadStopwords(stopword);
		//Stopwords.loadSymbol("symbol.txt");
		//Stopwords.loadHighFreq("highfreq.txt");
		System.out.println("Load Stopwords end .");
	}

	public static void main(String[] args) {
	}
}