您的位置:首页 > 编程语言 > Java开发

Java宽度优先爬虫例子

2011-01-23 21:06 218 查看
Java宽度优先爬虫例子



1宽度优先遍历是爬虫中使用最广泛的一种爬虫策略.


如图:





Todo表 Visited表


A 空

BCDEF A

CDEF AB

DEF ABC





EF ABCD

FH ABCDE

HG ABCDEF

GI ABCDEFH

I ABCDEFHG

空 ABCDEFHGI

2宽度优先遍历爬虫策略的优点:

1重要
的网页往往离种子比较


2最
到达。

3利于
爬虫合作抓取.



3例子

如图





待续..
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: