首页
Python
Java
前端
数据库
Linux
Chatgpt专题
开发者工具箱
requestsbeautifulsoup专题
Python爬取‘某车之家’车型数据:成果(requestsBeautifulSoup,含代码)及问题(Scrapy)
一、背景 1、目的: 爬取【某车之家】全部车型数据,用于车贷业务系统的车型选项。 2、结果: (1)数据内容:共43401条数据,包括【某车之家】全部在售(即将销售)及停售车型; (2)数据结构 二、说明 1、通过requests&BeautifulSoup爬取成功,但耗时较长(约3.5小时),且中途有断掉 2、Scrapy框架爬取不成功,待解决;【请大神们帮助解决】 三、成果(含代码)
阅读更多...