本文主要是介绍python爬虫数据可视化_python简单爬虫+数据可视化-分析近年高考录取分数线,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
今天高考已经结束了,虽然不关我什么事情,但突然想去看看近几年的录取分数线,于是我上网查了查,结果数据一大堆,也没有直观的图表,看起来真的费劲。
于是就用上了python的爬虫来分析一波!
于是打开网址:http://kaoshi.edu.sina.com.cn/college/scorelist?tab=batch&wl=&local=14&batch=&syear=2018.右击页面选择:检查->network->prevall(如下图),证实了这个页面上的数据不是通过js生成的,那么也没必要用Phantomjs+selenium来爬了,直接使用最简单的requeste模块就完事了。
数据直接返回,不是通过js动态生成的
那么这个网站上的这些数据是非常好爬的,直接用request就完事。那么爬虫代码非常简单:
class Spyder(object):
def __init__(self,begin_year,last_year):#初始化
self.url = "http://kaoshi.edu.sina.com.cn/college/sco
这篇关于python爬虫数据可视化_python简单爬虫+数据可视化-分析近年高考录取分数线的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!