对页面抓取的八大异常

　　1，效劳器衔接反常

　　效劳器衔接反常会有两种情况：一种是站点不稳定，Baiduspider检验衔接您网站的效劳器时呈现暂时无法衔接的情况;一种是Baiduspider一向无法衔接上您网站的效劳器。

　　构成效劳器衔接反常的要素通常是您的网站效劳器过大，超负荷运转。也有或许是您的网站运转不正常，请查看网站的web效劳器(如apache、iis)是不是安装且正常运转，并运用阅读器查看首要页面能否正常访问。您的网站和主机还或许阻挠了Baiduspider的访问，您需求查看网站和主机的防火墙。

　　2，网络运营商反常

　　网络运营商分电信和联通两种，Baiduspider经过电信或网通无法访问您的网站。假设呈现这种情况，您需求与网络效劳运营商停止联络，或许采购具有双线效劳的空间或许采购cdn效劳。

　　3，DNS反常

　　当Baiduspider无法解析您网站的IP时，会呈现DNS反常。或许是您的网站IP地址过错，或许域名效劳商把Baiduspider封禁。请运用WHOIS或许host查询本人网站IP地址是不是精确且可解析，假设不精确或无法解析，请与域名注册商联络，更新您的IP地址。

　　4，IP封禁

　　IP封禁为：限制网络的出口IP地址，遏止该IP段的运用者停止内容访问，在这里特指封禁了BaiduspiderIP。当您的网站不希冀Baiduspider访问时，才需求该设置，假设您希冀Baiduspider访问您的网站，请查看有关设置中是不是误添加了BaiduspiderIP。也有或许是您网站地点的空间效劳商把baiduIP停止了封禁，这时您需求联络效劳商更改设置。

　　5，UA封禁

　　UA即为用户署理(User-Agent)，效劳器经过UA识别访问者的身份。当网站关于指定UA的访问，回来反常页面(如403，500)或跳转到别的页面的情况，即为UA封禁。当您的网站不希冀Baiduspider访问时，才需求该设置，假设您希冀Baiduspider访问您的网站，useragent有关的设置中是不是有Baiduspider UA，并及时修正。

　　6，死链

　　页面现已无效，无法对用户供应任何有价值信息的页面即是死衔接，包含协议死链和内容死链两种方式:

　　协议死链：页面的TCP协议情况/HTTP协议情况明晰标明的死链，多见的如404、403、503情况等。

　　内容死链：效劳器回来情况是正常的，但内容现已变卦为不存在、已删去或需求权限等与原内容无关的信息页面。

　　关于死链，我们主张站点运用协议死链，并经过baidu站长平台–死链东西向baidu提交，以便baidu更快地发现死链，削减死链对用户以及查找引擎构成的负面影响。

　　7，反常跳转

　　将网络央求重新指向别的方位即为跳转。反常跳转指的是以下几种情况：

　　1)当前该页面为无效页面(内容已删去、死链等)，直接跳转到前一目录或许主页，baidu主张站长将该无效页面的进口超衔接删去掉

　　2)跳转到犯错或许无效页面

　　留意：关于长期跳转到别的域名的情况，如网站交换域名，baidu主张运用301跳转协议停止设置。

　　8，别的反常

　　1)关于baidurefer的反常：页面关于来自baidu的refer回来不同于正常内容的做法。

　　2)关于baiduua的反常：页面对baiduUA回来不同于页面原内容的做法。

　　3)JS跳转反常：页面加载了baidu无法识别的JS跳转代码，使得用户经过查找成果进入页面后发作了跳转的情况。

　　4)压力过大招致的偶然封禁：baidu会根据站点的规划、访问量等信息，自动设定一个合理的抓取压力。但是在反常情况下，如压力操控异常时，效劳器会根据本身负荷停止维护性的偶然封禁。这种情况下，请在回来码中回来503(其意义是“Service Unavailable”)，这样Baiduspider会过段时间再来检验抓取这个衔接，假设网站已闲暇，则会被胜利抓取。

　　大多数网站都是由于沙盒效应，永佳软件网站建立公司提示我们，要进步执行力，不要急。SEO是急不来的，由于主动权在查找引擎那里，你只能故步自封的去做。