爬虫scrapy框架及案例:scrapy的介绍及流程(P1-P2)

P1/P2 01scrapy的介绍/流程
更新于: 2022-01-08 15:20:15

为什么要学习 scrapy

  1. 为了让爬虫更快,更强而诞生的。
  2. 抓取网站数据,提取结构性数据的一个框架
  3. 使用了 Twisted 异步网络框架,可以加快下载速度

scrapy的流程

https://www.bilibili.com/video/BV1jt411Q7PD?p=2&spm_id_from=pageDriver

scrpay爬虫流程