URL爬取

URL爬取技术资料下载专区，收录500份相关技术文档、开发源码、电路图纸等优质工程师资源，全部免费下载。

资源总数
500

URL爬取 热门资料

查看全部 500 份 →

java 开发的网页爬虫，使用广度搜索，对网页的所有链接进行查找，并分析其链接，找出一级域名的所有网址，并将其添加到待处理列表，站外链接只作记录，不作处理，软件有界面，src文件夹里面有源码，myCrawler.jar可直接运行

2015-08-08 37 URL爬取

用JAVA写的简单爬虫，使用HttpURLConnection，需要的可以写入循环，然后用htmlparser解析出link。

2017-06-22 110 URL爬取