Scrapy框架的优点?

Scrapy框架是什么?

Scrapy框架是一个快速(fast)、高层次(high-level)的基于Python的web爬虫框架,抓取web站点并从页面提取结构化数据

那么为什么要使用Scrapy框架呢?

Scrapy框架的有点:

  1. 更容易构建大规模抓取项目;
  2. 异步处理请求的速度快
  3. 使用自动调节机制自动调整爬取速度

版权声明:本文为weixin_41540084原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接和本声明。