Scrapy框架是什么?
Scrapy框架是一个快速(fast)、高层次(high-level)的基于Python的web爬虫框架,抓取web站点并从页面提取结构化数据
那么为什么要使用Scrapy框架呢?
Scrapy框架的有点:
- 更容易构建大规模抓取项目;
- 异步处理请求的速度快
- 使用自动调节机制自动调整爬取速度
版权声明:本文为weixin_41540084原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接和本声明。
Scrapy框架是一个快速(fast)、高层次(high-level)的基于Python的web爬虫框架,抓取web站点并从页面提取结构化数据