一个比较基础且常见的爬虫，写下来用于记录和巩固相关知识。 一、前置条件 本项目采用scrapy框架进行爬取，需要提前安装 pip install scrapy# 国内镜像pip install scrapy -i https://pypi.douban.com/simple 由于需要保存数据到数据库，因此需要下载pymysql进行数据库相关的操作 pip install pymysql