说米网

新手站长在代理网站网站建设的时分，由于一些操作，导致正常的网站无法被搜索引擎爬虫拜访，进而使搜索引擎认为该页面是死链接。除了页面无法打开，一下的几个点都能够导致网站死链的产生。

以下小编就给出一些死链的产生状况，本次文章素材来自百度公开课搜索引擎课程，具备相对的权威性。其他搜索引擎相同能够参阅该篇文章来进行设置。

网站解决方案减少死链的产生，是从事SEO工作工作者必修课。

HTTP/HTTPS设置不妥引起死链

问题场景：

1.HTTP可拜访 ，HTTPS不可拜访

2.HTTP不可拜访 ，HTTPS可拜访

主张：

整站行为一致，确保所有的URL正常拜访，别的百度方面不主张HTTP与HTTPS共生。

封禁引起死链

问题场景：

1.用户能够正常拜访，爬虫不能。（爬虫抓取的是过错的页面）

一些网站由于特殊性，导致用户能够正常拜访，可是当爬虫拜访时，却回来一个过错的页面。

2.PC端可拜访，搜索引擎APP不能拜访

搜索引擎爬虫能够拜访PC端页面，可是不能拜访APP。百度官方的公开课说到这个APP拜访，暗指是支撑APP内拜访的一个分析，来作为一个综合评估参阅。所以，不屏蔽百度APP对网站的拜访。

3.DNS封禁

有些特定的DNS服务商会封禁搜索引擎爬虫来抓取域名的内容。这种在少数，究竟现在干流域名厂商，已经干流的DNS厂商都没有做DNS封禁。

4.服务器站点策略封禁

有些服务器自带的安全策略会屏蔽百度蜘蛛的抓取，这种状况会产生死链（网页URL链接，可是无内容）。当这种状况在整个网站呈现，会导致搜索引擎判断网站为一个残次网站。会被降权。

主张：

合理的运用站长资源东西，来确诊站点是否能正常抓取

辨认百度爬虫（双向DNS解析认证）免除封禁

对spider不公开内容设置robots协议封禁/设置死链，导致回来404

不主张运用额定的技术手段封禁百度爬虫。

对百度APP能够拜访

DNS变更引起死链

问题场景：

站点更新DNS解析，将域名的IP变更，IP1变为IP2，中心有时间差。

当站点的更换域名解析的IP后，由于有些DNS并不能做到立即呼应解析（一般为24小时）。我们拿24小时为例，中心有曾时间差，导致搜索引擎蜘蛛无法抓取，会评定为死链。

这个时分能够预留4-5天的缓存期，让爬虫来更新这个DNS

主张：

更换DNS后，运用站长资源平台东西来抓取测试，检查网站是否能正常抓取。

不主张频频更换DNS的IP，如必须变更请，给爬虫抓取预留缓冲时间。