一站式解決網站死鏈問題
在網站日常運營,死鏈是難免會產生的,不僅影響了用戶體驗,也影響了搜索效果;針對這一現(xiàn)象,我們邀請了站長社區(qū)版主—三木為大家分享死鏈處理心得。
本文主要講述死鏈對網站的影響;死鏈是如何產生的;如何發(fā)現(xiàn)死鏈;如何正確處理死鏈。
一、大量死鏈對搜索引擎來講,有什么影響?
1、死鏈率過高,會影響搜索引擎對網站的評分。
2、搜索引擎對每個網站每天抓取的頻次是限額的,若網站存在大量死鏈,會浪費掉抓取配額并影響其他正常頁面的抓取。
3、過多死鏈對網站用戶來講也是體驗不好的表現(xiàn)。西安做網站推薦閱讀>>> 新浪死鏈處理經驗分享,
二、死鏈接是如何產生的?
1、網站內部添加了錯誤的內部鏈接
編輯失誤或者程序員大意讓頁面產生了不存在的頁面。
2、網站短暫無法訪問
因為服務器、空間或程序問題導致網站短暫無法訪問,產生大量返回碼為5開頭的服務器錯誤頁面。
3、外部鏈接錯誤
用戶或者站長在站外發(fā)布了錯誤URL;別的網站復制或采集了你們含有錯誤鏈接的頁面。西安做網站推薦閱讀>>> 【官方說明】百度搜索標準死鏈官方文檔-協(xié)議死鏈、內容死鏈和跳轉死鏈,
4、爬蟲提取了不完整的URL
個別爬蟲在提取頁面URL的時候,因為URL中有不規(guī)則字符或者URL與后邊的文字鏈接起來,導致URL失效。
5、網站改版
如果你的網站已經改版或者將要改版,一定要注意死鏈問題,很多網站改版后,之前的老頁面直接刪除,導致了大量的死鏈接。
6、管理員刪除頁面
網站管理員刪除被黑、廣告、過時、被灌水頁面導致很多死鏈接。
三、如何發(fā)現(xiàn)網站中存在的死鏈接?
1、百度站長工具中的抓取異常工具可以查看最近一個月產生的各種死鏈,并支持導出功能。
2、使用相關爬蟲軟件,比如Xenu,此類工具可以爬取全站所有鏈接并分析頁面狀態(tài),分析完成后,支持導出功能,提取死鏈接即可。
3、在網站運營中,特別是論壇,經常需要刪除某些頁面,在刪除頁面時一定要記錄對應的Url以便后期提交死鏈。
通過上述兩種辦法提取的死鏈列表,一定要經過刪重和驗證,比如用wps表格進行刪除重復鏈接,然后再使用Http狀態(tài)批量查詢工具驗證下是否確實是死鏈接。
四、如何避免和處理死鏈接?
1、網站改版最容易產生死鏈的
改版之前的頁面如果有價值盡量不要刪除和修改Url,若需要更換域名或Url分配規(guī)則,那一定要將之前的url進行301跳轉到對應的Url;若老的數(shù)據必須刪除,那刪除的所有頁面Url要進行整理和提交死鏈。
2、對發(fā)現(xiàn)的死鏈接如何處理
將收集好的所有死鏈接粘貼到網站根目錄的一個文檔中,再把文檔地址提交到 百度站長工具--網頁抓取--死鏈提交--添加新數(shù)據--填寫死鏈文件地址;若大量死鏈具有一定的規(guī)則,如某個目錄下全部為死鏈接,可提交規(guī)則死鏈。
相關注意事項:
1、在百度站長工具中提交死鏈前,一定要確保提交的死鏈數(shù)據不存在活鏈接。一旦存在活鏈,會顯示提交失敗導致無法刪除。西安網站建設推薦閱讀>>> 手把手教您制作死鏈列表文件,
2、由于很多網站程序問題,很多打不開的頁面返回碼并非404,這是一個大問題,比如明明是打不開的頁面返回碼是301、200、500,如果是200的話,會導致網站中出現(xiàn)不同URL獲取相同內容。比如我的一個站,社區(qū)的帖子刪除后,返回碼卻是500,后期發(fā)現(xiàn)了,立馬進行了處理。大家盡量找出所有錯誤URL格式,并設置HTTP狀態(tài)碼為404。
3、把所有的錯誤頁面找到后,一定要尋找此類頁面URL相同特征,并且和正常頁面的特征有區(qū)分,寫對應規(guī)則到robots文件中,禁止蜘蛛抓取,就算你已經在站長工具中提交了死鏈,也建議robots封禁抓取。
4、robots只能解決蜘蛛不再抓取此類頁面,但解決不了已經收錄頁面的快照刪除問題,若你的網站被黑,刪除了被黑頁面,除了robots封禁被黑頁面外,還應該將這些頁面提交死鏈。提交死鏈是刪除被黑頁面快照的最快辦法。(文/百度站長學院)
相關文章:
-
在學習SEO的時候我們會接觸鏈接這個東西,在SEO界鏈接基本分為內鏈、外鏈(友情鏈接也被稱為外鏈)、反鏈、死鏈四大類。那么,我為何要單獨闡述死鏈這個東西呢?因為死鏈是當內鏈和外...
-
在第四次深度接觸結束后,spider工程師表示新浪的死鏈處理工作一直效果不錯,提醒學院應該請其做個分享。新浪穩(wěn)座國家級門戶頭把交椅,誰還敢說自己網站結構的復雜程度可以超越新浪。...
-
大量死鏈對搜索引擎來講,有什么影響? 1、幾乎很多站都避免不了存在死鏈接,但死鏈率過高,會影響搜索引擎對網站的評分。 2、搜索引擎對每個網站每天抓取的頻次是限額的,若網站存在大...
-
幾乎所有網站都會出現(xiàn)不再需要展現(xiàn)的網頁,如何處理這樣的網頁也成為站長經常談論的話題。為此,百度站長學院專訪了負責死鏈識別處理的工程師,了解到百度眼中的死鏈其實包括三種:...
-
前段時間服務器被入侵,掛了很多博彩之類的黑頁,而且全部被百度收錄。 現(xiàn)在把漏洞補好了,但刪除黑頁文件以后成了死鏈,要怎么讓百度刪除收錄呢? 在網上找了一下,似乎只有檢測網址...
-
上次說到如何正確設置死鏈,關鍵點在于http狀態(tài)碼一定要迅速返回,不要有延遲,那么接下來使用百度站長平臺提供的死鏈提交工具要注意什么呢? 昨天百度站長平臺又接到了反饋,站長說死...
-
在學習SEO的時候我們會接觸鏈接這個東西,在SEO界鏈接基本分為內鏈、外鏈(友情鏈接也被稱為外鏈)、反鏈、死鏈四大類。那么,我為何要單獨闡述死鏈這個東西呢?因為死鏈是當內鏈和外...
-
最近頻繁接到某站長反饋:已對自己論壇的垃圾帖做死鏈處理、并已使用百度站長平臺提供的死鏈提交工具,但相關鏈接依然未得到處理。經百度站長平臺追查,發(fā)現(xiàn)該站長提供的所謂死鏈并...
-
第一步,處理網站已存在的死鏈,制作死鏈文件篩查網站內部存在的死鏈,并將這些死鏈頁面設置成為404頁面,即百度訪問它們時返回404代碼。將需提交的死鏈列表制作成一個死鏈文件,制作...
-
一、死鏈介紹 1、什么是死鏈 頁面已經無效,無法對用戶提供任何有價值信息的頁面就是死鏈接,包括協(xié)議死鏈和內容死鏈兩種形式。 協(xié)議死鏈:頁面的TCP協(xié)議狀態(tài)/HTTP協(xié)議狀態(tài)明確表示的死...
- 上一篇:新浪死鏈處理經驗分享
- 下一篇:鏈接深度是什么?