贵阳小蚊子网络科技有限公司

 /uploads/allimg/190116/1-1Z1161KP30-L.jpg
 /uploads/allimg/190116/1-1Z1161JH20-L.jpg

SEO网站优化:搜索引擎蜘蛛不能顺利爬行—原因

Time:2019-01-11 Author:焦文
A.服务器连接异常:
分两种情况:一是站点不稳定,蜘蛛尝试连接网站的服务器时出现暂时无法连接的情况;另一种是搜索引擎蜘蛛无法连接网站服务器。
造成连接服务器异常的原因通常是网站服务器过大,超负荷运转,D导致网站运行不正常。这时应检查网站的Web服务器是否安装且正常运行,并使用浏览器检查主要页面能否正常访问。网站和主机还可能会阻止搜索引擎蜘蛛的访问,这时需要检查网站和主机的防火墙。
 B.网络运营商异常
国内运营商主要有电信和联通。如果搜索引擎蜘蛛无法通过电信或联通的网络访问网站,则需要与运营商联系,购买拥有双线服务的空间,或者购买CDN服务。
C、DNS异常
搜索引擎物蛛无法解析网站的IP地址时出现DNS异常,这可能是网站IP地址错误或者域名商把搜索引擎封禁导致。可以使用WHOIS或者host查询同站的IP地址是否正确且可解析。如果不正确或无法解析,应和域名注册商联系,更新IP地址。
D. IP封禁
IP时禁是指限制网络的出口IP地址,禁止IP段的使用者进行内容访问,特指封禁搜索引擎蜘妹的IP地址。如果希望搜索引擎蜘蛛访问网站,应检查相关设置中是否误添加了搜索引擎蜘蛛的IP地址。可能是网站所在的空间服务商封禁了的IP地址、这时需要联系服务商更改设置。
E. UA封禁
UA指用户代理, 服务器通过UA识别访问者的身份。当网站指定UA的访问出现返回异常页面(如402、500) 或跳转到其他页面的时,即为UA封禁。当网站不希望搜索引擎蜘蛛访问时才进行该设置.如果希望搜索引擎蜘蛛访问网站,可以查看User-agent的相关设置中进行对搜索引擎蜘蛛的UA进行修改。
F.死链
页面无效,无法对用户提供任何有价值信息就是死链,包括协议死链和内容死链两种形式。协议死链,即页面的TCP/HTTP协议状态明确表示的死链,常见的有404、 402、 502 状态等。内容死链,即服务器返回状态是正常的,但内容已经变更为不存在、已删除或需要权限等与原内容无关的信息页面的死链。
对于死链、可以通过站长平台——死链工具提交,以便更快地发现死链,减少死链对用户及搜索引擎造成的负面影响。
G.异常跳转
将网络请求重新指向其他位置即为跳转。异常跳转主要有以下几种情况。

a.当前页面为无效页面(内容已删除,死链等)时, 直接跳转到前一级目录或者首页。建议将该无效页面的入口超链接删除。
b.跳转到出错或者无效页面,对于长时间跳转到其他域名的情况,如网站更换域名,建议使用201跳转协议进行设置.