爬取火影人物能力值及其可视化(pyecharts,selenium库)实现

2023-10-29 14:40

本文主要是介绍爬取火影人物能力值及其可视化(pyecharts,selenium库)实现,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

昨天,我做了一个词频统计的小案例。然后,可视化做上瘾了。今天,我吃饭看火影的凯皇励志片段,我想要了解凯皇有多强,接着去网上百度,将凯皇的能力爬取下来,之后可视化出来。我也加入了我欣赏的几个角色,鸣人,我爱罗,佐助。来进行能力值可视化的对比,我发现凯皇确实很强!!

我现在仿佛听见柱间说:“代码!来啊!先上代码啊!!”。好的,上代码:

#encoding="utf-8"
#Author:Mr.Pan_学狂
#Finished_time:2021/3/11/23:43from selenium import webdriver#selenium库爬取信息
from pyecharts.charts import *#导入所有的图形
from pyecharts import options as opts#导入pyecharts的配置
import random
import timeoptions = webdriver.ChromeOptions()#配置chrome
options.add_argument('--headless')#将配置添加无头模式
options.add_argument('--disable-gpu')#关闭GPU
driver = webdriver.Chrome(options=options)#导入之前设置的配置class HY_Persons:#定义类,火影人物def __init__(self):#初始化函数self.kh = {}#创建凯皇的字典,存储凯皇的各项能力以及能力值self.wal = {}#创建我爱罗的字典,存储我爱罗的各项能力以及能力值self.zz = {}#创建佐助的字典,存储佐助的各项能力以及能力值self.mr = {}#创建鸣人的字典,存储鸣人的各项能力以及能力值def Request(self,url):#方便以后使用,一次创建,多次调用driver.get(url)#使用get请求页面url地址driver.implicitly_wait(random.randint(3, 5))#设置页面的隐式等待时间def spyder(self):#定义爬虫#凯皇,人物能力总和print("凯皇")url = 'https://baike.baidu.com/item/%E8%BF%88%E7%89%B9%E5%87%AF/4897951?fr=aladdin#3'#url地址HY_Persons.Request(self,url)#调用Request函数执行get请求,以及设置响应等待时间for num in range(1,10):#循环1到9次talent = driver.find_element_by_xpath('/html/body/div[4]/div[2]/div/div[2]/table[1]/tbody/tr[1]/th[{}]'.format(num)).text#使用格式化字符串的方法,将循环得到的数字加入的其中,使得数据不断更新talent_value = driver.find_element_by_xpath('/html/body/div[4]/div[2]/div/div[2]/table[1]/tbody/tr[2]/td['+str(num)+']/div').text#使用字符串拼接的方法,先将数字转换成字符串,再将字符串拼接起来。#print(talent)#打印能力的各项指标#print(talent_value)#打印能力值self.kh[talent] = talent_value#得到凯皇的各项能力以及能力值字典。print(self.kh)#打印字典time.sleep(random.randint(1,2))#爬取佐助,人物能力总和print('佐助')url2 = 'https://baike.baidu.com/item/%E5%AE%87%E6%99%BA%E6%B3%A2%E4%BD%90%E5%8A%A9/401898?fromtitle=%E4%BD%90%E5%8A%A9&fromid=286034#3'HY_Persons.Request(self,url2)number = 1for z in range(1,10):if z == 10:number = 0talent = driver.find_element_by_xpath('/html/body/div[4]/div[2]/div/div[2]/table[1]/tbody/tr[1]/th['+str(z+number)+']/div').texttalent_value = driver.find_element_by_xpath('/html/body/div[4]/div[2]/div/div[2]/table[1]/tbody/tr[4]/td['+str(z)+']/div').textself.zz[talent] = talent_valueprint(self.zz)time.sleep(random.randint(1,2))#爬取鸣人,人物能力总和print("鸣人")url3 = 'https://baike.baidu.com/item/%E6%BC%A9%E6%B6%A1%E9%B8%A3%E4%BA%BA/322717?fromtitle=%E9%B8%A3%E4%BA%BA&fromid=54086698'HY_Persons.Request(self,url3)for m in range(1,10):if m == 10:number = 0talent = driver.find_element_by_xpath('/html/body/div[4]/div[2]/div/div[2]/table[2]/tbody/tr[1]/th['+str(m+number)+']/div').texttalent_value = driver.find_element_by_xpath('/html/body/div[4]/div[2]/div/div[2]/table[2]/tbody/tr[4]/td['+str(m)+']/div').textself.mr[talent] = talent_valueprint(self.mr)self.mr['总计'] = '52'print(self.mr)time.sleep(random.randint(1,2))#爬取我爱罗,人物能力总和print("我爱罗")url4  = "https://baike.baidu.com/item/%E6%88%91%E7%88%B1%E7%BD%97/237248#2"HY_Persons.Request(self,url4)for w in range(1,10):if w == 10:number = 0talent = driver.find_element_by_xpath('/html/body/div[4]/div[2]/div/div[2]/table[1]/tbody/tr[1]/th['+str(w+number)+']/div').texttalent_value = driver.find_element_by_xpath('/html/body/div[4]/div[2]/div/div[2]/table[1]/tbody/tr[4]/td['+str(w)+']/div').textself.wal[talent] = talent_valueprint(self.wal)def Data_show(self):# dt = {"name": "", "max": "10", "min": "0"}# data_schema = []# for d in self.zz.keys():#     dt["name"] = d#     print(dt)#     data_schema.append(dt)# print(data_schema)kh = []zz = []mr = []wal = []self.kh['智力']=10#将智力和力量的值互换,保证跟后面的数据一致性self.kh['力量']=6#是可视化的数据是正确的for d in self.kh.values():#凯皇的能力值kh.append(d)value_kh = [kh]#存储凯皇能力值print(value_kh)for z in self.zz.values():#佐助的能力值zz.append(z)#存储佐助的能力值value_zz = [zz]for m in self.mr.values():#鸣人的能力值mr.append(m)#存储鸣人的能力值value_mr = [mr]for w in self.wal.values():#我爱罗的能力值wal.append(w)#存储我爱罗的能力值value_wal = [wal]data_schema = [{"name":"忍术","max":"10","min":"0"},#雷达图的各个能力数据。{"name":"体术","max":"10","min":"0"},{"name":"幻术","max":"10","min":"0"},{"name":"智慧","max":"10","min":"0"},{"name":"力量","max":"10","min":"0"},{"name":"速度","max":"10","min":"0"},{"name":"查克拉","max":"10","min":"0"},{"name":"结印","max":"10","min":"0"},{"name":"总计","max":"80","min":"0"}]Rdr = (Radar().add_schema(schema=data_schema,shape="circle").add("凯皇",value_kh,color="#DC143C")#设置红色.add("佐助",value_zz,color="#9400D3")#设置紫色.add("鸣人",value_mr,color="#FFA500")#设置橘黄色.add("我爱罗",value_wal,color="#4fa5e1")#设置蓝色.set_series_opts(label_opts=opts.LabelOpts(is_show=False)).set_global_opts(title_opts=opts.TitleOpts(title="火影人物可视化")#设置标题).render('F:/Radar.html')#另存为F盘下面)
if __name__ == '__main__':#定义主函数,程序入口HY = HY_Persons()#实例化对象HY.spyder()#调用函数HY.Data_show()#调用函数,可视化

代码的解释在注释中有了,不懂的朋友可以私信我一起探讨。
运行结果,如下图:
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
第一次做雷达图,没有经验,感觉很好看。后续有时间,会再做可视化的案例。
最后,感谢大家前来观看鄙人的文章,文中或有诸多不妥之处,还望指出和海涵。

这篇关于爬取火影人物能力值及其可视化(pyecharts,selenium库)实现的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/301321

相关文章

SpringBoot3实现Gzip压缩优化的技术指南

《SpringBoot3实现Gzip压缩优化的技术指南》随着Web应用的用户量和数据量增加,网络带宽和页面加载速度逐渐成为瓶颈,为了减少数据传输量,提高用户体验,我们可以使用Gzip压缩HTTP响应,... 目录1、简述2、配置2.1 添加依赖2.2 配置 Gzip 压缩3、服务端应用4、前端应用4.1 N

SpringBoot实现数据库读写分离的3种方法小结

《SpringBoot实现数据库读写分离的3种方法小结》为了提高系统的读写性能和可用性,读写分离是一种经典的数据库架构模式,在SpringBoot应用中,有多种方式可以实现数据库读写分离,本文将介绍三... 目录一、数据库读写分离概述二、方案一:基于AbstractRoutingDataSource实现动态

Python FastAPI+Celery+RabbitMQ实现分布式图片水印处理系统

《PythonFastAPI+Celery+RabbitMQ实现分布式图片水印处理系统》这篇文章主要为大家详细介绍了PythonFastAPI如何结合Celery以及RabbitMQ实现简单的分布式... 实现思路FastAPI 服务器Celery 任务队列RabbitMQ 作为消息代理定时任务处理完整

Java枚举类实现Key-Value映射的多种实现方式

《Java枚举类实现Key-Value映射的多种实现方式》在Java开发中,枚举(Enum)是一种特殊的类,本文将详细介绍Java枚举类实现key-value映射的多种方式,有需要的小伙伴可以根据需要... 目录前言一、基础实现方式1.1 为枚举添加属性和构造方法二、http://www.cppcns.co

使用Python实现快速搭建本地HTTP服务器

《使用Python实现快速搭建本地HTTP服务器》:本文主要介绍如何使用Python快速搭建本地HTTP服务器,轻松实现一键HTTP文件共享,同时结合二维码技术,让访问更简单,感兴趣的小伙伴可以了... 目录1. 概述2. 快速搭建 HTTP 文件共享服务2.1 核心思路2.2 代码实现2.3 代码解读3.

MySQL双主搭建+keepalived高可用的实现

《MySQL双主搭建+keepalived高可用的实现》本文主要介绍了MySQL双主搭建+keepalived高可用的实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,... 目录一、测试环境准备二、主从搭建1.创建复制用户2.创建复制关系3.开启复制,确认复制是否成功4.同

Java实现文件图片的预览和下载功能

《Java实现文件图片的预览和下载功能》这篇文章主要为大家详细介绍了如何使用Java实现文件图片的预览和下载功能,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... Java实现文件(图片)的预览和下载 @ApiOperation("访问文件") @GetMapping("

使用Sentinel自定义返回和实现区分来源方式

《使用Sentinel自定义返回和实现区分来源方式》:本文主要介绍使用Sentinel自定义返回和实现区分来源方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录Sentinel自定义返回和实现区分来源1. 自定义错误返回2. 实现区分来源总结Sentinel自定

Java实现时间与字符串互相转换详解

《Java实现时间与字符串互相转换详解》这篇文章主要为大家详细介绍了Java中实现时间与字符串互相转换的相关方法,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录一、日期格式化为字符串(一)使用预定义格式(二)自定义格式二、字符串解析为日期(一)解析ISO格式字符串(二)解析自定义

opencv图像处理之指纹验证的实现

《opencv图像处理之指纹验证的实现》本文主要介绍了opencv图像处理之指纹验证的实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学... 目录一、简介二、具体案例实现1. 图像显示函数2. 指纹验证函数3. 主函数4、运行结果三、总结一、