一、如何查看百度蜘蛛是否過來網站

  可以通過查看網站日志進行分析。Windows服務器的IISLinux服務器的apache都有記錄網站日志的功能。

  二、如何辨別百度蜘蛛

  百度官方給出的辨別百度蜘蛛的方法如下。

  1、查看UA

  首先要UA正確,百度公布過的UA有如下這些。

  移動UA:Mozilla/5.0(Linux;u;Android4.2.2;zh-cn;)AppleWebKit/534.46(KHTML,likeGecko)Version/5.1MobileSafari/10600.6.3(compatible;Baiduspider/2.0; http://www.baidu.com/search/spider.html)

  PCUA:Mozilla/5.0(compatible;Baiduspider/2.0; http://www.baidu.com/search/spider.html

  新增渲染UA:

  移動UAMozilla/5.0(iPhone;CPUiPhoneOS9_1likeMacOSX)AppleWebKit/601.1.46(KHTML,likeGecko)Version/9.0Mobile/13B143Safari/601.1(compatible;Baiduspider-render/2.0; http://www.baidu.com/search/spider.html)

  PCUAMozilla/5.0(compatible;Baiduspider-render/2.0; http://www.baidu.com/search/spider.html)

  2、反查IP

  可以通過dns反差ip的方法判斷是否是百度蜘蛛,只要不是來自“.baidu.com”“.baidu.jp”即為假冒的百度蜘蛛。

  三、如何診斷百度蜘蛛是否能夠正常抓取網站內容

  石家莊seo培訓認為很多網站因使用JavaScript代碼或框架結構等問題,不能被百度蜘蛛所抓取。這里進行診斷也是為了防止蜘蛛來網站后,因為不能正常抓取而離開,導致網站收錄很差,快照不更新等問題。

  如果診斷結果有問題,則需要修正問題,提升與百度蜘蛛的友好度。

  百度官方在線抓取診斷工具如下圖所示,選好網站(主頁或其他頁面)后,選擇PCUA或者移動UA,最后點擊抓取即可。

  稍等片刻,刷新頁面會顯示抓取成功,或者失敗。可以點擊查看抓取成功或失敗的詳細信息。

  四、如何通過百度蜘蛛IP得知網站狀態

  石家莊seo培訓認為以下內容僅供參考。

  1、抓取你網站的網頁蜘蛛

  60.172.229.61

  61.129.45.72

  61.135.162.*

  2、百度競價蜘蛛

  61.135.165.134

  117.34.74.66

  118.122.188.194

  119.63.196.9

  125.39.78.185

  3、百度統計的蜘蛛

  61.135.186.*

  4、站長工具的模仿的百度蜘蛛

  61.147.98.146

  61.188.39.16

  113.98.254.245

  117.21.220.245

  117.28.255.42

  5、搜外站長工具的模仿的百度蜘蛛

  124.248.34.52

  6114站長工具箱模仿的百度蜘蛛

  119.147.114.213

  121.10.141.*

  7、百度圖片蜘蛛

  123.15.**.**

  8、抓取網站內頁收錄的權重較低的非原創,需要通過一段時間考察

  123.125.71.*

  9、站長工具檢測造成的無用

  125.90.88.*

  10、百度考察期蜘蛛或降權蜘蛛

  159.226.50.*

  180.76.5.*

  180.76.5.87

  220.181.158.107

  11、偽裝百度蜘蛛

  180.149.130.*

  12、新站及站點有不正常現象

  183.91.40.144

  203.208.60.*

  13、不間斷巡邏各站就是路過

  210.72.225.*

  14、沙盒或者有被K

  123.125.68.*

  218.30.118.102

  220.181.68.*

  15、此ip爬過的文章或首頁,絕對24小時內放出來和隔夜快照

  220.181.108.*

  16、百度蜘蛛IP來過,準備抓取

  123.125.66.*

  220.181.7.*

  17、度過新站考察期

  121.14.89.*

  18、百度抓取首頁的專用IP,網站首頁快照更新快,隔夜更新

  220.181.108.95

  19、百度的權重IP段,抓取的文章第二天放出來,權重較高

  220.181.108.92

  20、綜合性權重IP,抓取文章和首頁,權重較高

  220.181.108.91

  220.181.108.75

  21、抓取內頁收錄的,但權重較低

  123.125.71.95

  123.125.71.97

  123.181.108.77

  123.125.71.106

  22、抓取網站首頁的,也屬于權重段,權重較高。

  220.181.108.89

  220.181.108.94

  220.181.108.97

  220.181.108.80

  220.181.108.77

  220.181.108.83

  220.181.108.86

  以上就是小小課堂網帶來的百度搜索引擎蜘蛛分析教程。感謝您的觀看。石家莊seo培訓原創。

 

 

更多關于云服務器域名注冊,虛擬主機的問題,請訪問三五互聯官網:www.shinetop.cn

贊(0)
聲明:本網站發布的內容(圖片、視頻和文字)以原創、轉載和分享網絡內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯系客服。郵箱:3140448839@qq.com。本站原創內容未經允許不得轉載,或轉載時需注明出處:三五互聯知識庫 » 百度搜索引擎蜘蛛分析

登錄

找回密碼

注冊

主站蜘蛛池模板: 少妇宾馆粉嫩10p| 免费十八禁一区二区三区| 无码视频伊人| 国产成人精品18| 国内揄拍国内精品人妻| 亚洲区一区二区激情文学| 护士张开腿被奷日出白浆| 亚洲国产精品第一区二区| 欧美牲交a欧美牲交aⅴ免费真| 亚洲精品乱码久久久久久按摩高清| 亚洲无线一二三四区手机| 成人av天堂网在线观看| 沾益县| 午夜福利一区二区在线看| 亚洲成色精品一二三区| 五月开心六月丁香综合色啪| 都昌县| 午夜免费无码福利视频麻豆| 日本精品不卡一二三区| 国产福利酱国产一区二区| 无码一级视频在线| 亚洲性线免费观看视频成熟| 久久精品国产精品亚洲精品| 国产成人综合在线女婷五月99播放| 亚洲一区二区三区| 理塘县| 亚洲av成人一区在线| 国产精品成| 成全影院电视剧在线观看| 中国亚州女人69内射少妇| 欧美牲交40_50a欧美牲交aⅴ| 国产不卡一区二区三区视频 | 兴文县| 久久精品无码免费不卡| 在线免费播放av观看| 国产熟睡乱子伦午夜视频| 国产丝袜肉丝视频在线| 精品无码久久久久久久久久| 国产目拍亚洲精品二区| 日韩人妻无码精品久久久不卡| 亚洲中文字幕在线二页|