首页
Python
Java
前端
数据库
Linux
Chatgpt专题
开发者工具箱
全部歌曲专题
Scrapy获取网易云音乐歌手全部歌曲(excel存取)
前言: 这个爬虫是为了之后爬取10W以上评论的歌曲做一下准备,这次以网易云音乐中的林俊杰为实验例子 爬虫思路: 爬取思路上,需要先通过歌手的所有专辑页面,获取到歌手的每个专辑的id,通过专辑的id转到专辑的界面,在专辑中获取歌曲id,转到歌曲界面后,我们就可以抓取歌曲上的信息了,不包括评论数,评论数是在另外的页面 爬虫过程: 首先展示一下爬虫的item部分 class Wangyi
阅读更多...