網絡營銷
對頁面抓取異常的原因及分析
發布時間:2017-10-26  /  瀏覽數量:

1,效勞器銜接反常
效勞器銜接反常會有兩種狀況:一種是站點不穩定,Baiduspider測驗銜接您網站的效勞器時呈現暫時無法銜接的狀況;一種是Baiduspider一向無法銜接上您網站的效勞器。

形成效勞器銜接反常的因素通常是您的網站效勞器過大,超負荷運轉。也有也許是您的網站運轉不正常,請查看網站的web效勞器(如apache、iis)是不是裝置且正常運轉,并運用瀏覽器查看首要頁面能否正常拜訪。您的網站和主機還也許阻撓了Baiduspider的拜訪,您需求查看網站和主機的防火墻。

2,網絡運營商反常:網絡運營商分電信和聯通兩種,Baiduspider經過電信或網通無法拜訪您的網站。假如呈現這種狀況,您需求與網絡效勞運營商進行聯絡,或許采購具有雙線效勞的空間或許采購cdn效勞。

3,DNS反常:當Baiduspider無法解析您網站的IP時,會呈現DNS反常。也許是您的網站IP地址過錯,或許域名效勞商把Baiduspider封禁。請運用WHOIS或許host查詢自己網站IP地址是不是準確且可解析,假如不準確或無法解析,請與域名注冊商聯絡,更新您的IP地址。

4,IP封禁:IP封禁為:限制網絡的出口IP地址,制止該IP段的運用者進行內容拜訪,在這里特指封禁了BaiduspiderIP。當您的網站不期望Baiduspider拜訪時,才需求該設置,假如您期望Baiduspider拜訪您的網站,請查看有關設置中是不是誤添加了BaiduspiderIP。也有也許是您網站地點的空間效勞商把baiduIP進行了封禁,這時您需求聯絡效勞商更改設置。

5,UA封禁:UA即為用戶署理(User-Agent),效勞器經過UA辨認拜訪者的身份。當網站關于指定UA的拜訪,回來反常頁面(如403,500)或跳轉到別的頁面的狀況,即為UA封禁。當您的網站不期望Baiduspider拜訪時,才需求該設置,假如您期望Baiduspider拜訪您的網站,useragent有關的設置中是不是有Baiduspider UA,并及時修正。

6,死鏈:頁面現已無效,無法對用戶供給任何有價值信息的頁面即是死連接,包含協議死鏈和內容死鏈兩種形式:

協議死鏈:頁面的TCP協議狀況/HTTP協議狀況清晰表明的死鏈,多見的如404、403、503狀況等。

內容死鏈:效勞器回來狀況是正常的,但內容現已變更為不存在、已刪去或需求權限等與原內容無關的信息頁面。
關于死鏈,我們主張站點運用協議死鏈,并經過baidu站長平臺–死鏈東西向baidu提交,以便baidu更快地發現死鏈,削減死鏈對用戶以及查找引擎形成的負面影響。

7,反常跳轉:將網絡懇求重新指向別的方位即為跳轉。反常跳轉指的是以下幾種狀況:
1)當前該頁面為無效頁面(內容已刪去、死鏈等),直接跳轉到前一目錄或許主頁,baidu主張站長將該無效頁面的進口超連接刪去掉
2)跳轉到犯錯或許無效頁面
留意:關于長期跳轉到別的域名的狀況,如網站替換域名,baidu主張運用301跳轉協議進行設置。

8,別的反常:
1)關于baidurefer的反常:頁面關于來自baidu的refer回來不同于正常內容的做法。
2)關于baiduua的反常:頁面對baiduUA回來不同于頁面原內容的做法。
3)JS跳轉反常:頁面加載了baidu無法辨認的JS跳轉代碼,使得用戶經過查找成果進入頁面后發生了跳轉的狀況。
4)壓力過大導致的偶爾封禁:baidu會依據站點的規劃、拜訪量等信息,自動設定一個合理的抓取壓力。但是在反常狀況下,如壓力操控異常時,效勞器會依據自身負荷進行保護性的偶爾封禁。這種狀況下,請在回來碼中回來503(其意義是“Service Unavailable”),這樣Baiduspider會過段時間再來測驗抓取這個連接,假如網站已閑暇,則會被成功抓取。





上一條: 百度只抓取網站首頁如何解決
下一條: 網站SEO是不是網站建設中的一部分?
相關熱門資訊  News
一二三客戶案例

  123 NETWORK

合作共贏,助您打開網絡營銷財富之間!

www.www69avpz.com

合作對接電話:0731-88571521

聯系方式

地址:湖南省長沙市天心區韶山南路248號南園503室

電話:13637482004    0731-88571521

網址:http://www.www69avpz.com/

郵箱:123@123007.com

在線QQ咨詢

需求咨詢

價格咨詢

微信咨詢

掃一掃進移動端

版權所有 © 長沙一二三網絡技術有限公司    統一社會信用代碼:91430103MACCH7984M    網站ICP備案號:湘ICP備2023006748號     湘公網安備 43010302001803號        
主站蜘蛛池模板: 亚洲欧美综合区自拍另类| 亚洲一成人毛片| 精品综合久久久久久888蜜芽| 国产精品一区二区久久不卡| 中文字幕.com| 日韩在线看片中文字幕不卡| 亚洲理论片在线观看| 精品久久久久久亚洲精品| 成人三级精品视频在线观看| 久久综合色88| 欧美性猛交xxxx乱大交3| 伊人久久大香线蕉av五月天| 老妇高潮潮喷到猛进猛出| 国产性色视频在线高清| 91video国产一区| 天天躁夜夜躁狠狠躁2021| 中文字幕在线看片| 日韩一区二区三区精品| 亚洲一区二区三区国产精华液 | 好男人资源在线www免费| 久久一区不卡中文字幕| 日韩欧美一区二区三区在线播放| 亚洲国产天堂久久综合| 欧美黄色一级片免费看| 便器调教(肉体狂乱)小说| 精品视频无码一区二区三区| 国产三级观看久久| 高清色黄毛片一级毛片| 国产精品一区二区三乱码| 2022国内精品免费福利视频| 在我跨下的英语老师景老师| d动漫精品专区久久| 妖精色AV无码国产在线看| 中国武警gaysexchina武警gay| 无翼少无翼恶女漫画全彩app| 久久精品亚洲欧美日韩久久| 最近中文字幕完整视频高清10| 亚洲伊人久久大香线蕉| 欧美在线观看第一页| 亚洲最大av网站在线观看| 欧美黑人巨大videos精品|