WebCrawlers 使用scrapy爬虫框架的代码在scrapy_code中. 具体每个项目的解析在http://www.urlteam.org/category/web_crawlers/ 修改了注释部分,增加爬虫框架scrapy的说明.