上市公司年报爬取(其他公告同理)---仅供学习使用

2023-10-23 22:10

本文主要是介绍上市公司年报爬取(其他公告同理)---仅供学习使用,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

声明:本程序不存在任何恶意攻击意图,仅供学习练习使用

感谢巨潮资讯提供的信息:http://www.cninfo.com.cn/
教程开始

1. 环境

使用 pip安装 request 1.0.117
模块 os、json、time模块均为python自带环境 Python 3.8.12
代码

2. List item

import os
import requests
import json
import timeprint("年报爬取,股票代码,开始时间、结束时间\n退出程序在输入股票代码处输入exit退出\n一次最多100条")url = "http://www.cninfo.com.cn/new/hisAnnouncement/query"headers = {"Accept": "application/json, text/javascript, */*; q=0.01","Accept-Encoding": "gzip, deflate","Accept-Language": "zh-CN,zh;q=0.9,en;q=0.8,en-GB;q=0.7,en-US;q=0.6","Connection": "keep-alive","Content-Type": "application/x-www-form-urlencoded; charset=UTF-8","Host": "www.cninfo.com.cn","Origin": "http://www.cninfo.com.cn","Referer": "http://www.cninfo.com.cn/new/disclosure/stock?stockCode=000501&orgId=gssz0000501","User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/101.0.4951.54 Safari/537.36 Edg/101.0.1210.39","X-Requested-With": "XMLHttpRequest"
}
while True:number = str(input("请输入代号:"))if number.__eq__("exit"):print("退出程序")breakbegin = str(input("请输入开始年份:")) + "-01-01~"end = str(input("请输入结束年份:")) + "-12-31"data = {"stock": number + ",gssz0" + number,"tabName": "fulltext","pageSize": 100,"pageNum": 1,"column": "szse","category": "category_ndbg_szsh;","plate": "sz","seDate": begin + end,"searchkey": "","secid": "","sortName": "","sortType": "","isHLtitle": "true"}print(data)res = requests.post(url, data)content = res.contentdjson = json.loads(content)if not os.path.exists("./pdf/" + number):os.mkdir("./pdf/" + number)if djson.get("announcements") is None:print("你查找的股票在该范围内无公告,请检查股票编号和时间范围")else:for j in djson.get("announcements"):url = str(j.get("adjunctUrl"))name = j.get("announcementTitle")url = "http://www.cninfo.com.cn/new/announcement/download?" \+ "bulletinId=" + url[21:-4] + "&announceTime=" + url[10:20]print(name + ":\t" + url)response = requests.get(url)content = response.contentfile = open("./pdf/" + number + "/" + name + ".pdf", "wb+")file.write(content)file.close()# time.sleep(1)  # 防止被屏蔽print(number + "任务完成")

结果图
在这里插入图片描述

这篇关于上市公司年报爬取(其他公告同理)---仅供学习使用的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/270761

相关文章

使用DeepSeek API 结合VSCode提升开发效率

《使用DeepSeekAPI结合VSCode提升开发效率》:本文主要介绍DeepSeekAPI与VisualStudioCode(VSCode)结合使用,以提升软件开发效率,具有一定的参考价值... 目录引言准备工作安装必要的 VSCode 扩展配置 DeepSeek API1. 创建 API 请求文件2.

使用TomCat,service输出台出现乱码的解决

《使用TomCat,service输出台出现乱码的解决》本文介绍了解决Tomcat服务输出台中文乱码问题的两种方法,第一种方法是修改`logging.properties`文件中的`prefix`和`... 目录使用TomCat,service输出台出现乱码问题1解决方案问题2解决方案总结使用TomCat,

解决IDEA使用springBoot创建项目,lombok标注实体类后编译无报错,但是运行时报错问题

《解决IDEA使用springBoot创建项目,lombok标注实体类后编译无报错,但是运行时报错问题》文章详细描述了在使用lombok的@Data注解标注实体类时遇到编译无误但运行时报错的问题,分析... 目录问题分析问题解决方案步骤一步骤二步骤三总结问题使用lombok注解@Data标注实体类,编译时

Java中使用Java Mail实现邮件服务功能示例

《Java中使用JavaMail实现邮件服务功能示例》:本文主要介绍Java中使用JavaMail实现邮件服务功能的相关资料,文章还提供了一个发送邮件的示例代码,包括创建参数类、邮件类和执行结... 目录前言一、历史背景二编程、pom依赖三、API说明(一)Session (会话)(二)Message编程客

C++中使用vector存储并遍历数据的基本步骤

《C++中使用vector存储并遍历数据的基本步骤》C++标准模板库(STL)提供了多种容器类型,包括顺序容器、关联容器、无序关联容器和容器适配器,每种容器都有其特定的用途和特性,:本文主要介绍C... 目录(1)容器及简要描述‌php顺序容器‌‌关联容器‌‌无序关联容器‌(基于哈希表):‌容器适配器‌:(

使用Python实现高效的端口扫描器

《使用Python实现高效的端口扫描器》在网络安全领域,端口扫描是一项基本而重要的技能,通过端口扫描,可以发现目标主机上开放的服务和端口,这对于安全评估、渗透测试等有着不可忽视的作用,本文将介绍如何使... 目录1. 端口扫描的基本原理2. 使用python实现端口扫描2.1 安装必要的库2.2 编写端口扫

使用Python实现操作mongodb详解

《使用Python实现操作mongodb详解》这篇文章主要为大家详细介绍了使用Python实现操作mongodb的相关知识,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录一、示例二、常用指令三、遇到的问题一、示例from pymongo import MongoClientf

SQL Server使用SELECT INTO实现表备份的代码示例

《SQLServer使用SELECTINTO实现表备份的代码示例》在数据库管理过程中,有时我们需要对表进行备份,以防数据丢失或修改错误,在SQLServer中,可以使用SELECTINT... 在数据库管理过程中,有时我们需要对表进行备份,以防数据丢失或修改错误。在 SQL Server 中,可以使用 SE

使用Python合并 Excel单元格指定行列或单元格范围

《使用Python合并Excel单元格指定行列或单元格范围》合并Excel单元格是Excel数据处理和表格设计中的一项常用操作,本文将介绍如何通过Python合并Excel中的指定行列或单... 目录python Excel库安装Python合并Excel 中的指定行Python合并Excel 中的指定列P

浅析Rust多线程中如何安全的使用变量

《浅析Rust多线程中如何安全的使用变量》这篇文章主要为大家详细介绍了Rust如何在线程的闭包中安全的使用变量,包括共享变量和修改变量,文中的示例代码讲解详细,有需要的小伙伴可以参考下... 目录1. 向线程传递变量2. 多线程共享变量引用3. 多线程中修改变量4. 总结在Rust语言中,一个既引人入胜又可