之前看过用Scrapy 框架建立项目爬取 网页解析时候用的Xpath进行解析的网页元素 这次尝试用select方法匹配元素 1、入口爬取页面 http://www.ygdy8.com/index.html 2、用到模块  requests(网页源码下载) BeautifulSoup4(网页解析) 3、思路：首先由入口爬取页面进行获取网页上方栏目及对应url 如下图 4、建立菜单url列表 for