crawler.out

一个简单的在互联网上抓包的程序

sites[i]=http://ethesys.ntcpe.edu.tw/ETD-db/
siteCrawing : http://ethesys.ntcpe.edu.tw/ETD-db/
memoryFilter=.*?ethesys.ntcpe.edu.tw/ETD-db/.*?
diskFilter=.*?ethesys.ntcpe.edu.tw/ETD-db/.*?
typeFilter=.*?(pdf).*?
maxPages=1000000
data != null : append(http://ethesys.ntcpe.edu.tw/ETD-db/)
http://ethesys.ntcpe.edu.tw/ETD-db/
Content-Type:text/html; charset=Big5 suffix=htm fileName=sites/ntcpe/752d1111.htm
parse url=http://ethesys.ntcpe.edu.tw/ETD-db/ html.length()=5814
childUrls.length=15
childUrls[0]=http://ethesys.ntcpe.edu.tw/ETD-db/images/top_logo.gif
data != null : append(http://ethesys.ntcpe.edu.tw/ETD-db/images/top_logo.gif)
childUrls[1]=http://ethesys.ntcpe.edu.tw/ETD-db/ETD-search-c/search
data != null : append(http://ethesys.ntcpe.edu.tw/ETD-db/ETD-search-c/search)
childUrls[2]=http://ethesys.ntcpe.edu.tw/ETD-db/information.html
data != null : append(http://ethesys.ntcpe.edu.tw/ETD-db/information.html)
childUrls[3]=http://ethesys.ntcpe.edu.tw/ETD-db/ETD-submit/login
data != null : append(http://ethesys.ntcpe.edu.tw/ETD-db/ETD-submit/login)
childUrls[4]=http://ethesys.ntcpe.edu.tw/ETD-db/ETD-search/search
data != null : append(http://ethesys.ntcpe.edu.tw/ETD-db/ETD-search/search)
childUrls[5]=http://ethesys.ntcpe.edu.tw/ETD-db/e-family.html
data != null : append(http://ethesys.ntcpe.edu.tw/ETD-db/e-family.html)
childUrls[6]=http://ethesys.ntcpe.edu.tw/ETD-db/download/AdbeRdr60_cht_full.exe
data != null : append(http://ethesys.ntcpe.edu.tw/ETD-db/download/AdbeRdr60_cht_full.exe)
childUrls[7]=http://ethesys.ntcpe.edu.tw/ETD-db/download/authorization.pdf
data != null : append(http://ethesys.ntcpe.edu.tw/ETD-db/download/authorization.pdf)
childUrls[8]=http://ethesys.ntcpe.edu.tw/ETD-db/download/ntcpe_logo.jpg
data != null : append(http://ethesys.ntcpe.edu.tw/ETD-db/download/ntcpe_logo.jpg)
childUrls[9]=http://ethesys.ntcpe.edu.tw/ETD-db/download/example.pdf
data != null : append(http://ethesys.ntcpe.edu.tw/ETD-db/download/example.pdf)
childUrls[10]=http://ethesys.ntcpe.edu.tw/ETD-db/ETD-browse/browse
data != null : append(http://ethesys.ntcpe.edu.tw/ETD-db/ETD-browse/browse)
childUrls[11]=http://wlibrary.ntcpe.edu.tw/index.asp
childUrls[12]=http://ethesys.ntcpe.edu.tw/ETD-db/librarian.html
data != null : append(http://ethesys.ntcpe.edu.tw/ETD-db/librarian.html)
childUrls[13]=http://ethesys.ntcpe.edu.tw/ETD-db/librarian.html
childUrls[14]=http://ethesys.ntcpe.edu.tw/ETD-db/images/ntcpe.gif
data != null : append(http://ethesys.ntcpe.edu.tw/ETD-db/images/ntcpe.gif)
http://ethesys.ntcpe.edu.tw/ETD-db/images/top_logo.gif
http://ethesys.ntcpe.edu.tw/ETD-db/information.html
http://ethesys.ntcpe.edu.tw/ETD-db/ETD-submit/login
http://ethesys.ntcpe.edu.tw/ETD-db/ETD-search/search
http://ethesys.ntcpe.edu.tw/ETD-db/e-family.html
http://ethesys.ntcpe.edu.tw/ETD-db/download/AdbeRdr60_cht_full.exe
http://ethesys.ntcpe.edu.tw/ETD-db/download/authorization.pdf
http://ethesys.ntcpe.edu.tw/ETD-db/download/ntcpe_logo.jpg
http://ethesys.ntcpe.edu.tw/ETD-db/download/example.pdf
http://ethesys.ntcpe.edu.tw/ETD-db/ETD-search-c/search
Content-Type:image/gif suffix=gif fileName=sites/ntcpe/6679517d.gif
Content-Type:text/html; charset=Big5 suffix=htm fileName=sites/ntcpe/1a513de4.htm
Content-Type:text/html; charset=Big5 suffix=htm fileName=sites/ntcpe/72ddd5a8.htm
url=http://ethesys.ntcpe.edu.tw/ETD-db/images/top_logo.gif title= error=java.lang.Exception: not htm and not to disk : filtered ! date=Mon Jun 20 11:42:47 CST 2005
Content-Type:image/jpeg suffix=jpg fileName=sites/ntcpe/2b77d753.jpg
url=http://ethesys.ntcpe.edu.tw/ETD-db/download/ntcpe_logo.jpg title=