1.序言 因为工作内容原因需要对四库一平台全站数据进行抓取，这次爬取经历了两次方案进行抓取，现在一一记录下来。网站有多处反爬，今天在这里会对所有反爬与爬虫细节进行细化分析。 2.正文 首先打开网站 这里有个数据服务，点击进入就会有具体数据的列表页了。 今天只介绍企业数据如何进行抓取，因为其他的数据都是相同的手法，了解了一个其他的就知道了。我使用的是chrome浏览器，F12进行检查。

本文只用于学习研究，如造成其他影响联系博主删帖！！！ 目标网站：aHR0cDovL2p6c2MubW9odXJkLmdvdi5jbi9zdXBlcnZpc2UvaW5kZXg= 废话少说，直接开始抓包   看到的响应结果是一串乱码 ，接下来开始寻找加密入口。 根据xhr来打断点，  点最后的堆栈跟进去， 打上断点刷新页面， 可以很容易找到加密入口，  这时候在此处追加断点，同

原来发了几遍文章关于 全国建筑市场监管公共服务平台(四库一平台)平台的网站数据采集和抓取： 建筑资质爬虫抓取-全国建筑市场监管公共服务平台(一)入门篇 建筑资质爬虫抓取-全国建筑市场监管公共服务平台(二)-接口篇 新版建筑市场（四库一平台）抓取最新信息（爬虫） 最近发现 建筑市场监监管平台推出了自己的小程序《全国建筑市场监管服务平台》。     在使用过程中，发现没有前端

文章目录 js逆向思路第一步抓包第一种破解方法，堆栈法python还原js扣代码还原 第二种破解方法，搜索法完整代码效果展示 js逆向思路 第一步看请求网址的发起程序都有哪些 接在js文件搜索AES,MD5,等高频加密方式的字段 1 parse 2 decrypt3 .toString()4 Base645 表单字段6 url关键字 最后可疑的地方都打上断点，

四库一数据加密分析 随便说说 前几天是春节，回家过年去了，也就没有更新了。 之前一直康康webpack有没有好的方式可以扣出来，所以这里就写一个之前搞过的网站， 要解密出来不是很难，要完全扣代码的话，对于我来说还是费了点劲的，太菜了。。。 这篇主要讲改写js的方式，下篇说全部扣js的方式。 声明 改文章主要提供学习交流使用，请勿利用其进行不正当行为 如改文章侵犯了贵公司的隐私，请联系我立刻

经过几天的全国建筑市场监管公共服务平台（http://jzsc.mohurd.gov.cn）平台的研究，终于完成数据的完全抓取。陆陆续续差不多花费一周的时间进行软件开发和设计，然后爬取时间才不多20天时间，对所以企业信息进行完整的抓取。 数据如下： 其中在开发过程中遇到两个问题？ 1、新版的API接口数据进行AES加密，解决方案《建筑资质爬虫抓取-全国建筑市场监管公共服务平台(一)入门密码