怎么有效禁止虛假百度蜘蛛【2021年親測有效】
我們在分析網站日志的時候,常常會發現一些莫名其妙🎉的IP段,怎樣分辨這些IP段是否為真正的百度蜘蛛呢?如果是虛假的百度蜘蛛我們能否進行禁止或者屏蔽呢?答案是可ꦡ以的。
我們在分析網站日志的時候,常常會發🌳現一些莫名其妙的IP段,怎樣分辨這些IP段是否為真正的百度蜘蛛呢?如果是虛假的百度蜘蛛我們能否進行禁止或者屏蔽呢?答案是可以ဣ的。
先來介紹怎樣分辨真假百度蜘蛛;
首先,在網站日志中統計所有需要查詢的IP地址;
其次,對于非蘋果電腦用戶,按住【windows+R】快捷鍵,打開“⭕運行”,如下圖 所示;
第三,在“文本框”內輸入“cmd”,然后按Enter鍵,或者單擊&ldquo🎀;確定”按鈕!單擊Enter鍵之后打開如下的對話框;
第四,在光ꦦ標位置處輸入nslookup 123.125.71.95,中間有一個空格;也可以先復制IP,然后🌌在光標處右擊,就會完成粘貼;IP輸入完成后,按Enter就可以出現分析結果;從下圖可以看出這個IP是真正的百度蜘蛛。
通過此方法,我們還可以發現谷歌蜘蛛、360蜘蛛、搜狗蜘蛛、神馬蜘蛛等。分辨真正百度蜘蛛的方꧃法還有很多,大家可以自己百度一下并實操。如果你不想讓某一個或某幾個虛假百度蜘蛛爬取你網站的內容,我們就可以禁止或屏蔽這些IP,怎樣屏蔽呢?有2種方法。
&♎nbsp; 第一種方法:從服務器的防火墻上屏蔽IP,不過爬蟲通常有很多🦩IP,我們可以屏蔽爬蟲的IP段;但是如果爬蟲的IP段沒有規律,那此種方法就不適用了。
第二種方法;.htacce🅠ss屏蔽虛假百度蜘蛛。有一些虛假的百度爬蟲并不遵守robots規則,那我們還可以通過.htaccess來屏蔽它,代碼如下:
上圖中htaccess屏蔽蜘蛛的方法是一種比較簡單的方法,還有其他的一些方法可以使用,感興趣的小伙伴可以嘗試一下。如果你在操作過程中遇到一些問題,歡迎咨詢魔貝課凡,魔貝課凡專注于線上seo培訓,任何有關seo的問題都可以咨詢我們;同時你想系統的提高你的seo技能,魔貝課凡是你不二的選擇,魔貝課凡是騰訊課堂的top合作機構,想了解的可以到騰訊課堂上搜一搜。推薦閱讀:網站日志在哪里看 阿里服務器
本文怎么有效禁止虛假百度蜘蛛【2021年親測有效】由SEO講師團隊原創編輯,微信號:MBKFSEO666;我們專注于SEO線上培訓,所以專業。