沈阳SEO_沈阳网站优化_沈阳网站建设_沈阳初衷网络科技有限公司

首页 > 网站优化基础 > / 正文

造成Baiduspider抓取异常的原因

2017-09-05 网站优化基础
  有一些网页,内容优质,用户也能够正常拜访,然而Baiduspider却无奈正常拜访并抓取,造成搜寻成果笼罩率缺失,对百度搜寻引擎对站点都是一种丧失,百度把这种情况叫“抓取异样”。对大批内容无奈正常抓取的网站,百度搜寻引擎会以为网站存在用户体验上的缺点,并下降对网站的评估,在抓取、索引、排序上都会受到一定水平的负面影响,终极影响到网站从百度获取的流量。下面向站长介绍一些常见的抓取异样起因:
  1,服务器衔接异样服务器衔接异样会有两种情况:一种是站点不稳固,Baiduspider尝试衔接你网站的服务器时呈现临时无奈衔接的情况;一种是Baiduspider始终无奈衔接上你网站的服务器。造成服务器衔接异样的起因通常是你的网站服务器过大,超负荷运行。也有可能是你的网站运行不正常,请检查网站的web服务器(如apache、iis)是否装置且正常运行,并应用阅读器检查重要页面是否正常拜访。你的网站跟 主机还可能禁止了Baiduspider的拜访,你须要检查网站跟 主机的防火墙。
  2,网络经营商异样:网络经营商分电信跟 联通两种,Baiduspider通过电信或网通无奈拜访你的网站。假如呈现这种情况,你须要与网络服务经营商进行接洽,或者购置领有双线服务的空间或者购置cdn服务。
  3,DNS异样:当Baiduspider无奈解析你网站的IP时,会呈现DNS异样。可能是你的网站IP地址过错,或者域名服务商把Baiduspider封禁。请应用WHOIS或者host查问本人网站IP地址是否准确且可解析,假如不准确或无奈解析,请与域名注册商接洽,更新你的IP地址。
  4,IP封禁:IP封禁为:限度网络的出口IP地址,制止该IP段的应用者进行内容拜访,在这里特指封禁了BaiduspiderIP。当你的网站不盼望Baiduspider拜访时,才须要该设置,假如你盼望Baiduspider拜访你的网站,请检查相干设置中是否误增加了BaiduspiderIP。也有可能是你网站所在的空间服务商把百度IP进行了封禁,这时你须要接洽服务商更改设置。
  5,UA封禁:UA即为用户代办(User-Agent),服务器通过UA辨认拜访者的身份。当网站针对指定UA的拜访,返回异样页面(如403,500)或跳转到其余页面的情况,即为UA封禁。当你的网站不盼望Baiduspider拜访时,才须要该设置,假如你盼望Baiduspider拜访你的网站,useragent相干的设置中是否有Baiduspider UA,并及时修正。
  6,死链:页面已经无效,无奈对用户供给任何有价值信息的页面就是死链接,包含协定死链跟 内容死链两种情势:协定死链:页面的TCP协定状况/HTTP协定状况明白表现的死链,常见的如404、403、503状况等。内容死链:服务器返回状况是正常的,但内容已经变革为不存在、已删除或须要权限等与原内容无关的信息页面。对死链,咱们倡议站点应用协定死链,并通过百度站长平台--死链工具向百度提交,以便百度更快地发明死链,减少死链对用户以及搜寻引擎造成的负面影响。
  7,异样跳转:将网络恳求从新指向其余地位即为跳转。异样跳转指的是以下多少种情况:
  (1)当前该页面为无效页面(内容已删除、死链等),直接跳转到前一目录或者首页,百度倡议站长将该无效页面的进口超链接删除掉
  (2)跳转到犯错或者无效页面留神:对长时间跳转到其余域名的情况,如网站调换域名,百度倡议应用301跳转协定进行设置。
  8,其余异样:
  (1)针对百度refer的异样:网页针对来自百度的refer返回不同于正常内容的行动。
  (2)针对百度ua的异样:网页对百度UA返回不同于页面原内容的行动。
  (3)JS跳转异样:网页加载了百度无奈辨认的JS跳转代码,使得用户通过搜寻成果进入页面后产生了跳转的情况。
  (4)压力过大引起的偶尔封禁:百度会依据站点的范围、拜访量等信息,主动设定一个公道的抓取压力。然而在异样情况下,如压力把持变态时,服务器会依据本身负荷进行维护性的偶尔封禁。这种情况下,请在返回码中返回503(其含意是“Service Unavailable”),这样Baiduspider会过段时间再来尝试抓取这个链接,假如网站已闲暇,则会被胜利抓取。

Tags:

更多造成Baiduspider抓取异常的原因的相关文章

网站分类
标签列表