scrapy学习:在 PyCharm 中开发、调试 Scrapy 应用
安装 Scrapy 后,可以通过其自带的命令行完成新建项目,项目构件,运行项目等功能。
先说几个基本的
# 安装
pip install scrapy
# 检查版本
scrapy version
先看大体的项目结构
![](https://tva1.js.work/large/da432263gy1gyq02adn79j20dc0bgdgd.jpg)
在根目录下新建 main.py
from scrapy.cmdline import execute
execute(['scrapy', 'crawl', 'entry'])
以 debug 方式运行项目
![](https://tva1.js.work/large/da432263gy1gyq03u2kdtj20cb0imdgs.jpg)
断点可以正常工作了
![](https://tva1.js.work/large/da432263gy1gyq04tcalgj20sx0g0ta2.jpg)