百度蜘蛛IP分别代表什么?它们有什么用?

2024-03-23 00:50
文章标签 分别 ip 百度 代表 蜘蛛

本文主要是介绍百度蜘蛛IP分别代表什么?它们有什么用?,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

       对于SEOer来说,日志分析是必须的,可是蜘蛛的分类,我们怎么分析、查看呢?今天阿泽给大家详解一下百度蜘蛛IP分别代表什么?它们有什么用?希望对大家有帮助!
       我们都知道:百度蜘蛛有着很多不同的ip段,我们网站的iis日志也都记载着每个访客或者蜘蛛的所以记录,为了能够对我们的网站能够更了解,比如什么时候百度降权蜘蛛过来了?什么时候百度沙河蜘蛛过来了?什么时候百度高权重蜘蛛过来了?什么时候百度抓取首页和内页的蜘蛛过来了等等一系列的问题,有了这篇文章让你在分析网站IIS日志的时候如鱼得水,看看都有那些蜘蛛ip来过,参考下下面的数据就能对你网站了如指掌。阿泽SEO自学网在网络上收集了下面关于百度蜘蛛不同ip的解释总结,希望能够对小伙伴们有所帮助!

下面这些ip段是百度蜘蛛IP的造访,准备来抓取你网站的网页蜘蛛。
       60.172.229.61
       61.129.45.72
       61.135.162.*
下面这些ip段是百度竞价蜘蛛。
       61.135.165.134
       117.34.74.66
       118.122.188.194
       119.63.196.9
       125.39.78.185
下面这个ip段是百度联盟蜘蛛爬虫,其实就是百度统计的蜘蛛。
       61.135.186.*
下面这几个ip段是站长工具上的模仿百度蜘蛛。
       61.147.98.146
       61.188.39.16
       113.98.254.245
       117.21.220.245
       117.28.255.42
下面这个ip是搜外站长工具的模仿百度蜘蛛。
       124.248.34.52
下面这个ip和ip段是114站长工具箱的蜘蛛,在你网站不是很稳定的情况下会经常过来的。
       119.147.114.213
       121.10.141.*
这个ip段是百度图片蜘蛛的。
       123.15.**.**
这个ip段是抓取网站内页收录的,但是由于文章权重比较低,被爬过的内页文章暂时不会放出来,需要考察一段时间,因为不是原创的文章。(百度图片爬虫)
       123.125.71.*
下面这个ip段是属于百度蜘蛛IP,是你经常用一些站长工具检测后造成的,基本是没有多大用的。
       125.90.88.*
下面这些ip段为百度考察期蜘蛛,也有可能是降权蜘蛛,因为有人说过他网站被K的时候网站全是这个蜘蛛,或者是百度人工。
       159.226.50.*
       180.76.5.*
       180.76.5.87
       220.181.158.107
这个是伪装百度蜘蛛的一个IP段。
       180.149.130.* 
这个ip段出现在新站及站点有不正常现象后的时候。
       183.91.40.144
       203.208.60.*
这个ip段不间断巡逻各站,就是路过一下,是来打酱油的,不用担心啥。
       210.72.225.*
如果发现下面这几个ip段每天只增不减的话,那就很危险了,很有可能会进入沙盒或者有被K站的现象。
       123.125.68.*
       218.30.118.102
       220.181.68.*
这个ip段主要是抓取首页占80%,内页占30%,此ip爬过的文章或首页,绝对24小时内放出来和隔夜快照的!一般成功抓取返回代码都是 200 0 0返回304 0 0代表网站没更新,蜘蛛来过,如果是 200 0 64别担心这不是K站,可能是网站是动态的,所以返回就是这个代码。
       220.181.108.*
下面的ip段代表百度蜘蛛IP来过了,准备抓取你网站上的东西!
       123.125.66.*
       220.181.7.*
这个ip段是百度蜘蛛作为度过新站考察期的一个ip段。
       121.14.89.*
这个是百度抓取首页的专用IP,如是220.181.108段的ip来的话基本来说网站会天天隔夜快照,一般是不会出错的!偷偷的笑吧!
       220.181.108.95
下面这个ip是98%抓取首页可能还会抓取其他(不是指内页)属于百度的权重IP段,此ip段爬过的文章或首页正常情况下基本在24小时都会放出来,偷偷的笑吧!
       220.181.108.92
下面这个ip属于综合的,主要是用来抓取首页和内页或者其它页面的,也是属于一个权重IP,基本被抓过的文章或首页24小时就会放出来。
       220.181.108.91 
下面这个ip是重点抓取更新文章的,内页达到90%,首页抓取达到8%,2%其他权重ip段,基本被抓过的文章或首页24小时就会放出来。
       220.181.108.75
下面这些ip是抓取内页收录的,权重相对比较低,爬过此段的内页文章不会很快被放出来,因它怀疑不是原创文章或者怀疑是采集来的文章。
       123.125.71.95
       123.125.71.97 
       123.181.108.77
       123.125.71.106
下面这些ip是专用抓取网站首页的,也属于权重段,一般返回代码304 0 0就代表网站未更新。
       220.181.108.89
       220.181.108.94
       220.181.108.97
       220.181.108.80
       220.181.108.77
       220.181.108.83
       220.181.108.86
       以上就是我整理收集的全部了,如果那里有遗漏或者不够完整的话,小伙伴们可以给我留言,我会及时加上更新的!
       最后,建议小伙伴将这些保存好,以便于分析日志时对比哦,感谢您的阅读。




  • zeropython 微信公众号 5868037 QQ号 5868037@qq.com QQ邮箱

这篇关于百度蜘蛛IP分别代表什么?它们有什么用?的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/836621

相关文章

百度OCR识别结构结构化处理视频

https://edu.csdn.net/course/detail/10506

[vivado][IP核]FFT

刘东华的IP核详解: 1、 2、

[vivado][IP核]DDS

刘东华的IP核详解: 1、 这里的是指IP核配置中的相位数据的宽度。 2、 实际使用此IP核时并没有“频率分辨率”可以配,是靠改变来变的。 3、 4、 5、 数据输出的ready在数据正式输出时才会有。 自己仿真: 使用SIN/COS LUT only的模式,使用一个累加器作为相位输入,不知怎么,输出为X。

[ip核][vivado]aurora

Xapp1193:  discovered:1)并不是所有芯片都支持aurora.xc7z010就没有。                     2)XDC文件的指令-允许未约束的引脚的存在:                 set_property BITSTREAM.General.UnconstrainedPins {Allow} [current_design] PG046

[ip核][vivado]Block Menory Gennerator 学习

<刘东华的xilinx系列FPGA芯片IP核详解>读书摘录: 1. 2. 3.

[ip核][vivado]FIFO 学习

<xlinx FPGA应用进阶 通用IP核详解和设计开发>读书摘录: 1.        2.3.仿真模型 特点总结:1)复位后会有busy状态,需要等待wr_rst_busy信号低电平后才能正常写入                  2)prog_full信号的高电平长度可调                  3)仿真中的读状态很奇怪,并没有正常读取,都是XXX的状态。 所用的te

局域网内vue2 配置本地IP地址访问项目

在日常开发中同事可能需要访问你的前端项目,可以通过配置实现通过ip访问 一.首先找到config文件夹目录下的 index.js文件             将此处的host的值修改为0.0.0.0(即 host: 0.0.0.0) // Various Dev Server settings//host: 'localhost' //将localhost进行替换成 0.0.0.0host:

在 Java 中,JDK、JRE、JVM 分别代表什么,有何关系和区别?

在Java开发的世界中,我们会经常听到JDK、JRE和JVM这三个词。它们都与Java的运行环境以及Java程序的编译和运行有关,它们之间也存在一些关联性和区别。 什么是JDK、JRE和JVM 我们来看它们分别是什么。 JDK,全称Java Development Kit,即Java开发工具包。顾名思义,JDK是用于Java开发的一套工具包,里面包含了Java的编译器javac、

iOS 到处 ipa包的时候 会有四个选项分别代表什么

如图 在 iOS 到处 ipa包的时候 会有四个选项  1.Save for iOS App Store Deployment 保存到本地 准备上传App Store 或者在越狱的iOS设备上使用 2.Save for Ad Hoc Deployment 保存到本地 准备在账号添加的可使用设备上使用(具体为在开发者账户下添加可用设备的udid),该app包是发布证书编

关于文章“python+百度语音识别+星火大模型+讯飞语音合成的语音助手”报错的修改

前言 关于我的文章:python+百度语音识别+星火大模型+讯飞语音合成的语音助手,运行不起来的问题 文章地址: https://blog.csdn.net/Phillip_xian/article/details/138195725?spm=1001.2014.3001.5501 1.报错问题 如果运行中报错,且报错位置在Xufi_Voice.py文件中的pcm_2_wav,如下图所示