如何通過IP來判斷此spider是不是來自百度搜索引擎？
分享
評論
贊0
如何識別Baiduspider
上周百度站長平臺接到某站長求助，表示誤封禁了Baiduspider的IP，詢問是否有辦法獲得Baiduspider的所有IP，打算放入白名單加以保護，防止再次誤封。在此要告訴各位站長，Baiduspider的IP池是不斷變動的，我們無法提供IP全集。
除此之外，之前還有站長發來質疑說Baiduspider光顧過于頻繁，已超越服務器承受能力。而百度站長平臺追查發現，Baiduspider對該站點的抓取并無異常，那只spider極有可能是個李鬼。
那么，站長該如何通過IP來判斷此spider是不是來自百度搜索引擎的呢？
可以通過DNS反查方式來解決這個問題。根據平臺不同驗證方法不同，如linux/windows/os三種平臺下的驗證方法分別如下：
1、在linux平臺下，您可以使用host ip命令反解ip來判斷是否來自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名，非 *.baidu.com 或 *.baidu.jp 即為冒充。
2、在windows平臺或者IBM OS/2平臺下，您可以使用nslookup ip命令反解ip來 判斷是否來自Baiduspider的抓取。打開命令處理器 輸入nslookup xxx.xxx.xxx.xxx（IP地 址）就能解析ip， 來判斷是否來自Baiduspider的抓取，Baiduspider的hostname以*.baidu.com 或*.baidu.jp 的格式命名，非 *.baidu.com 或 *.baidu.jp 即為冒充。
3、在mac os平臺下，您可以使用dig 命令反解ip來 判斷是否來自Baiduspider的抓取。打開命令處理器 輸入dig xxx.xxx.xxx.xxx（IP地 址）就能解析ip， 來判斷是否來自Baiduspider的抓取，Baiduspider的hostname以 *.baidu.com 或*.baidu.jp 的格式命名，非 *.baidu.com 或 *.baidu.jp 即為冒充。
猜你喜歡
評論(0人參與，0條評論)
發布評論
最新評論