错误博客( cuowu.com )发布于 2019-06-03 23:51:55

360搜索蜘蛛IP

本文为360站长平台的360搜索蜘蛛IP教程。

360蜘蛛IP

360搜索的蜘蛛在访问网站时,都会带上带有360Spider签名信息的UA,其形态为:

Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/50.0.2661.102 Safari/537.36; 360Spider

为满足站长朋友们的需求,我们现将最新360搜索的蜘蛛IP段公布出来,供大家参考。请大家注意,不要误拦截360搜索蜘蛛,以避免出现收录或网站抓取异常。

此外,需要说明的是,目前360搜索蜘蛛暂时不支持nslookup命令的查询,因此建议大家以本页面查询到的IP为准,结合本页提供的信息进行比对,以确认是否为360搜索的蜘蛛。

以下为360搜索的蜘蛛IP段:

180.153.232.*
180.153.234.*
180.153.236.*
180.163.220.*
42.236.101.*
42.236.102.*
42.236.103.*
42.236.10.*
42.236.12.*
42.236.13.*
42.236.14.*
42.236.15.*
42.236.16.*
42.236.17.*
42.236.46.*
42.236.48.*
42.236.49.*
42.236.50.*
42.236.51.*
42.236.52.*
42.236.53.*
42.236.54.*
42.236.55.*
42.236.99.*

原文地址:http://www.so.com/help/spider_ip.html

相关阅读:360搜索蜘蛛IP段及蜘蛛ip被拦截的问题解决方法

360Spider的ip,我们已经公开在这里辣~:http://www.so.com/help/spider_ip.html

360Spider的UA(UA是蜘蛛访问的时候,在服务器中留下的访问签名信息,凡是下面这个UA,就代表是360Spider来过了):

Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/50.0.2661.102 Safari/537.36; 360Spider

360robots协议支持FAQ:http://www.haosou.com/help/help_3_2.html

关于蜘蛛被拦截:

蜘蛛被拦截一般是网站服务器或防火墙在做设置时,不小心将搜索引擎的蜘蛛做了拦截,导致蜘蛛无法访问,获取不到网站信息。这种问题会导致网站不收录或收录出现异常的问题

蜘蛛被拦截的常见现象有:

1、360Spider 无访问记录

2、360Spider 有访问页面的记录,但是访问的http状态为非200的状态,主要状态码有:404、403、0、503、504、521等

3、部分优质内容不收录或者收录出现异常(如优质内容的收录数量剧烈下降等,注意:关于内容收录的维度,也请参考我们之前发布的各类算法和白皮书,不清楚的小伙伴可以看这里)

如下面这个站点,就是典型的蜘蛛被拦截,我们没有办法收录到,其表现为http抓取状态为0

蜘蛛被拦截

如何解决?

1、将我们的蜘蛛ip、UA加入到可访问的白名单

2、加白之后,尽快通过网站收录提交入口,提交网站的收录,并通过站长平台,提交网站的sitemap,观察一段时间(一般建议观察15-30天)看是否开始有收录

3、向您的空间服务商进行反馈,告知其加白我们的蜘蛛ip以及ua

以上就是我们解决蜘蛛被拦截的一个基本思路,各位小伙伴清楚了波~

如果仍然有疑问或者需要我们协助,可以向我们发邮件进行反馈。

相关阅读原文地址:https://bbs.360.cn/thread-14235047-1-1.html

相关阅读:360搜索蜘蛛IP更新公告

各位站长朋友:

360搜索于2018年11月22日,在原有蜘蛛IP的不变基础上,新增了两个IP段的蜘蛛,分别为:

180.163.220.*
42.236.10.*

具体详情,大家可点击该链接:http://www.so.com/help/spider_ip.html,进入360蜘蛛IP段列表进行查询

请各位站长朋友注意,为保证网站的正常收录和抓取,请避免错误拦截360搜索的蜘蛛。并建议大家尽快更新网站抓取白名单,将360搜索的蜘蛛IP段或具体的IP加入到可访问和抓取的白名单列表中!

相关阅读原文地址:https://bbs.360.cn/thread-15631705-1-1.html


2020年错误博客亲测项目系列

错误教程( cuowu.com )专注网推培训、SEO培训和网赚培训,微信/电话:13722793092

关注微信公众号:第一时间获得错误博客最新教程,让我们一起成长!

公众号二维码