在網(wǎng)站日常運(yùn)營(yíng)，死鏈?zhǔn)请y免會(huì)產(chǎn)生的，不僅影響了用戶體驗(yàn)，也影響了搜索效果；針對(duì)這一現(xiàn)象，競(jìng)網(wǎng)建站將結(jié)合12年實(shí)戰(zhàn)經(jīng)驗(yàn)，從死鏈?zhǔn)侨绾萎a(chǎn)生的；如何發(fā)現(xiàn)死鏈；如何正確處理死鏈等三方面。分享了死鏈解決方法。

     一、死鏈的存在對(duì)搜索引擎的影響?

    1、死鏈率過(guò)高，會(huì)影響搜索引擎對(duì)網(wǎng)站的評(píng)分。

    2、搜索引擎對(duì)每個(gè)網(wǎng)站每天抓取的頻次是限額的，若網(wǎng)站存在大量死鏈，會(huì)浪費(fèi)掉抓取配額并影響其他正常頁(yè)面的抓取。

    3、過(guò)多死鏈對(duì)網(wǎng)站用戶來(lái)講也是體驗(yàn)不好的表現(xiàn)。

     二、死鏈接是如何產(chǎn)生的?

    1、網(wǎng)站內(nèi)部添加了錯(cuò)誤的內(nèi)部鏈接編輯失誤或者程序員大意讓頁(yè)面產(chǎn)生了不存在的頁(yè)面。

    2、網(wǎng)站短暫無(wú)法訪問(wèn)因?yàn)榉?wù)器、空間或程序問(wèn)題導(dǎo)致網(wǎng)站短暫無(wú)法訪問(wèn)，產(chǎn)生大量返回碼為5開(kāi)頭的服務(wù)器錯(cuò)誤頁(yè)面。

    3、外部鏈接錯(cuò)誤用戶或者站長(zhǎng)在站外發(fā)布了錯(cuò)誤URL；別的網(wǎng)站復(fù)制或采集了你們含有錯(cuò)誤鏈接的頁(yè)面。

    4、爬蟲(chóng)提取了不完整的URL個(gè)別爬蟲(chóng)在提取頁(yè)面URL的時(shí)候，因?yàn)閁RL中有不規(guī)則字符或者URL與后邊的文字鏈接起來(lái)，導(dǎo)致URL失效。

    5、網(wǎng)站改版如果你的網(wǎng)站已經(jīng)改版或者將要改版，一定要注意死鏈問(wèn)題，很多網(wǎng)站改版后，之前的老頁(yè)面直接刪除，導(dǎo)致了大量的死鏈接。

    6、管理員刪除頁(yè)面網(wǎng)站管理員刪除被黑、廣告、過(guò)時(shí)、被灌水頁(yè)面導(dǎo)致很多死鏈接。

     三、如何發(fā)現(xiàn)網(wǎng)站中存在的死鏈接？

    1、百度站長(zhǎng)工具中的抓取異常工具可以查看最近一個(gè)月產(chǎn)生的各種死鏈，并支持導(dǎo)出功能。

    2、使用相關(guān)爬蟲(chóng)軟件，比如Xenu，此類(lèi)工具可以爬取全站所有鏈接并分析頁(yè)面狀態(tài)，分析完成后，支持導(dǎo)出功能，提取死鏈接即可。

    3、在網(wǎng)站運(yùn)營(yíng)中，特別是論壇，經(jīng)常需要?jiǎng)h除某些頁(yè)面，在刪除頁(yè)面時(shí)一定要記錄對(duì)應(yīng)的Url以便后期提交死鏈。

通過(guò)上述兩種辦法提取的死鏈列表，一定要經(jīng)過(guò)刪重和驗(yàn)證，比如用wps表格進(jìn)行刪除重復(fù)鏈接，然后再使用Http狀態(tài)批量查詢工具驗(yàn)證下是否確實(shí)是死鏈接。

     四、如何避免和處理死鏈接？

     1、網(wǎng)站改版最容易產(chǎn)生死鏈的

改版之前的頁(yè)面如果有價(jià)值盡量不要?jiǎng)h除和修改Url，若需要更換域名或Url分配規(guī)則，那一定要將之前的url進(jìn)行301跳轉(zhuǎn)到對(duì)應(yīng)的Url；若老的數(shù)據(jù)必須刪除，那刪除的所有頁(yè)面Url要進(jìn)行整理和提交死鏈。

     2、對(duì)發(fā)現(xiàn)的死鏈接如何處理

將收集好的所有死鏈接粘貼到網(wǎng)站根目錄的一個(gè)文檔中，再把文檔地址提交到 百度站長(zhǎng)工具--網(wǎng)頁(yè)抓取--死鏈提交--添加新數(shù)據(jù)--填寫(xiě)死鏈文件地址；若大量死鏈具有一定的規(guī)則，如某個(gè)目錄下全部為死鏈接，可提交規(guī)則死鏈。

     相關(guān)注意事項(xiàng)：

    1、在百度站長(zhǎng)工具中提交死鏈前，一定要確保提交的死鏈數(shù)據(jù)不存在活鏈接。一旦存在活鏈，會(huì)顯示提交失敗導(dǎo)致無(wú)法刪除。

    2、 由于很多網(wǎng)站程序問(wèn)題，很多打不開(kāi)的頁(yè)面返回碼并非404，這是一個(gè)大問(wèn)題，比如明明是打不開(kāi)的頁(yè)面返回碼是301、200、500，如果是200的話， 會(huì)導(dǎo)致網(wǎng)站中出現(xiàn)不同URL獲取相同內(nèi)容。比如我的一個(gè)站，社區(qū)的帖子刪除后，返回碼卻是500，后期發(fā)現(xiàn)了，立馬進(jìn)行了處理。大家盡量找出所有錯(cuò)誤 URL格式，并設(shè)置HTTP狀態(tài)碼為404。

    3、把所有的錯(cuò)誤頁(yè)面找到后，一定要尋找此類(lèi)頁(yè)面URL相同特征，并且和正常頁(yè)面的特征有區(qū)分，寫(xiě)對(duì)應(yīng)規(guī)則到robots文件中，禁止蜘蛛抓取，就算你已經(jīng)在站長(zhǎng)工具中提交了死鏈，也建議robots封禁抓取。

    4、robots只能解決蜘蛛不再抓取此類(lèi)頁(yè)面，但解決不了已經(jīng)收錄頁(yè)面的快照刪除問(wèn)題，若你的網(wǎng)站被黑，刪除了被黑頁(yè)面，除了robots封禁被黑頁(yè)面外，還應(yīng)該將這些頁(yè)面提交死鏈。提交死鏈?zhǔn)莿h除被黑頁(yè)面快照的最快辦法。