精品久久久久久无码专区_久久精品国产99久久久古代_久久精品人妻无码一区二区三区_久久婷婷综合色丁香五月_老色鬼久久亚洲AV综合_两个人看的WWW在线观看_麻豆精产国品一二三产区区_最近中文字幕免费MV在线视频_影音先锋女人AA鲁色资源_男人扒开女人内裤强吻桶进去,国产精品自在拍首页,AV高潮娇喘抽搐喷水视频,日韩av片无码一区二区不卡电影

推廣 熱搜: 后臺  帝國cms  位置  網(wǎng)站  Wordpress教程  帝國cms建站  內(nèi)容  DESTOON  郵箱  destoon7.0 

【百度搜索】官方說法:如何正確識別百度蜘蛛(User-Agent)

   日期:2024-05-16     瀏覽:77    違規(guī)舉報
 
騰訊云服務(wù)器優(yōu)惠
百度蜘蛛是什么,?最近百度蜘蛛來的太頻繁服務(wù)器抓爆了,!最近百度蜘蛛都不來了怎么辦,?還有很多站點想得到百度蜘蛛的IP段,想把IP加入白名單,,但I(xiàn)P地址范圍動態(tài)變化不固定,,百度官方也無法對外公布。

那么如何才能識別正確的百度蜘蛛呢,?今日干貨帶你輕松兩步正確識別百度蜘蛛IP:

 

 

一,、查看UA信息

如果UA信息不對,可以直接判斷為非百度搜索的蜘蛛,。目前UA分為移動,、PC、和小程序三個應(yīng)用場景,,這三個渠道UA分別如下:

 

移動UA: 

Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko)Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html)


Mozilla/5.0 (iPhone;CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko)Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0;+http://www.baidu.com/search/spider.html) 

 

PC UA:

Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

Mozilla/5.0 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)

微信圖片_20240516112653

小程序UA:

Mozilla/5.0 (iPhone;CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko)Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0;Smartapp; +http://www.baidu.com/search/spider.html)

 

 

二,、雙向DNS解析認(rèn)證

第一步:DNS反查IP

開發(fā)者通過對日志中訪問服務(wù)器的IP地址運行反向DNS查找,判斷某只spider是否來自百度搜索引擎,,Baiduspiderhostname*.baidu.com*.baidu.jp 的格式命名,,非*.baidu.com*.baidu.jp即為冒充。

根據(jù)平臺不同驗證方法不同,,如linux/windows/os三種平臺下的驗證方法分別如下:

 

 

1).linux平臺下,,您可以使用host ip命令反解ip來判斷是否來自Baiduspider的抓取。

 

 

2).windows平臺或者IBM OS/2平臺下,,您可以使用nslookup ip命令反解ip 判斷是否來自Baiduspider的抓取,。打開命令處理器 輸入nslookup xxx.xxx.xxx.xxxIP地址)就能解析ip,來判斷是否來自Baiduspider的抓取,。

 

 

3).macos平臺下,,您可以使用dig命令反解ip來判斷是否來自Baiduspider的抓取。打開命令處理器輸入dig -x xxx.xxx.xxx.xxxIP地址)就能解析ip,,來判斷是否來自Baiduspider的抓取,。

 

第二步:對域名運行正向DNS查找

對第一步中通過命令檢索到的域名運行正向DNS查找,驗證該域名與您日志中訪問服務(wù)器的原始IP地址是否一致,,IP地址一致可確認(rèn)spider來自百度搜索引擎,,IP地址不一致即為冒充。

示例1:

> host 111.206.198.69 

69.198.206.111. in-addr.arpa domain name pointer baiduspider-111-206-198-69.crawl.baidu.com. 

 

> host baiduspider-111-206-198-69.crawl.baidu.com 

baiduspider-111-206-198-69.crawl.baidu.com has address 111.206.198.69

免責(zé)聲明:
1,、本站所收集的部分公開資料來源于互聯(lián)網(wǎng),,轉(zhuǎn)載的目的在于傳遞更多信息及用于網(wǎng)絡(luò)分享,,并不代表本站贊同其觀點和對其真實性負(fù)責(zé),也不構(gòu)成任何其他建議,。
2,、本站部分作品內(nèi)容是由網(wǎng)友自主投稿和發(fā)布、編輯整理上傳,,對此類內(nèi)容本站僅提供交流平臺,,不為其版權(quán)負(fù)責(zé),更不為其觀點承擔(dān)任何責(zé)任,。
3,、因行業(yè)及專業(yè)性有限,故未能核驗會員發(fā)布內(nèi)容的真實性及有效性,,不為其負(fù)責(zé),,如有虛假或違規(guī)內(nèi)容敬請準(zhǔn)備材料圖片發(fā)郵件到info@n#舉報,本站核實后積極配合刪除,。
4,、如果您發(fā)現(xiàn)網(wǎng)站上有侵犯您的知識產(chǎn)權(quán)的作品,請與我們?nèi)〉寐?lián)系,,我們會及時處理或刪除,。
 
打賞
 
更多>同類網(wǎng)站技術(shù)
0相關(guān)評論

推薦圖文
推薦網(wǎng)站技術(shù)
點擊排行
網(wǎng)站首頁  |  關(guān)于我們  |  聯(lián)系方式  |  使用協(xié)議  |  免責(zé)聲明  |  版權(quán)隱私  |  信息發(fā)布規(guī)則  |  網(wǎng)站地圖  |  排名推廣  |  廣告服務(wù)  |  積分換禮  |  網(wǎng)站留言  |  RSS訂閱  |  違規(guī)舉報  |  粵ICP備2020081222號
Powered By DESTOON