【网站日志分析】如何查看网站被百度抓取的情况？

云码酷 · 于 2019-7-9 20:14:59

马上注册，自学更多教程，下载更多资源。

您需要登录才可以下载或查看，没有帐号？立即注册

x

百度用于抓与网页的法式叫做Baiduspider - 百度蜘蛛，我们检察网站被百度抓与的状况次要是阐发，网站日记里百度蜘蛛Baiduspider的活泼性：抓与频次，返回的HTTP形态码。
　　检察日记的方法：
　　经由过程FTP，正在网站根目次找到一个日记文件，文件名普通包罗log，下载解压内里的记事本，那便是网站的日记，记载了网站被会见战操纵的状况。
　　由于各个效劳器战主机的状况差别，差别的主机日记功用记载的内乱容差别，有的以至出有日记功用。
　　日记内乱容以下：
　　61.135.168.22 - - [11/Jan/2009:04:02:45 +0800] "GET /bbs/thread-7303-1-1.html HTTP/1.1" 200 8450 "-" "Baiduspider+(+http://www.百度.com/search/spider.htm)"
　　阐发：
　　GET /bbs/thread-7303-1-1.html 代表，抓与/bbs/thread-7303-1-1.html 那个页里。
　　200  代表胜利抓与。
　　8450  代表抓与了8450个字节。
　　假如您的日记里格局没有是云云，则代表日记格局设置差别。
　　许多日记里能够看到 200 0 0战200 0  64 则皆代表一般抓与。
　　抓与频次是经由过程检察逐日的日记里百度蜘蛛抓与次数去获知。抓与频次并出有一个标准的工夫表或频次数字，我们普通经由过程多日的日记比照去判定。固然，我们期望百度蜘蛛逐日抓与的次数越多越好。
　　正在网站呈现成绩的状况下，经由过程检察网站日记，检察网站的HTTP返回值能否一般，
转自搜中

上一篇：SEO常睹征象-快照回档-沙盒等
下一篇：【网站日记阐发】网站日记是甚么？