本文主要是介绍scrapy 将item存到mysql中(pymysql),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
本文将介绍如何将抓好的item数据存入到mysql中
声明:本文使用的python交互工具为pymysql并非mysqldb,因为网上使用pymysql存入数据的相关文章较少,所以写了这篇文章供大家参考
环境:ubantu
准备工作:
items.py
将想要抓的数据累出来,下面是我要抓的数据:(我的项目名为wens)
class WensItem(scrapy.Item):# define the fields for your item here like:# name = scrapy.Field()img_url = scrapy.Field()name = scrapy.Field()update_time = scrapy.Field()update_word = scrapy.Field()author = scrapy.Field()
steam.py(我的爬虫脚本)
这篇关于scrapy 将item存到mysql中(pymysql)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!