营销知识
您的位置:主页 > 营销知识 >

作为一个SEO人如何查看搜索引擎蜘蛛的来访

网站编辑:红莲 │ 发表时间:2012-03-14 17:17 | 文章标签:SEO,搜索引擎蜘蛛

作为一个SEO人,大家都想让自己的网站跟容易被搜搜引擎收录那么我们就需要知道什么事百度蜘蛛和谷歌机器人。

百度蜘蛛和google机器人,具体说是一个程序。这个程序的功能是抓取网页的内容。那么我们如何知道百度蜘蛛来抓取网站内容?这个就要通过网站的日志才能看到。

那么如何查看网站日志呢?

登陆你网站FTP后台,看到一个包含log的文件夹,里面就是日志,一般按日期存放。下载,解压,里面就是了。(如果没有,那是空间不支持日志)

网站日志下来了,也解压,是一个记事本,打开后,搜索baiduspider,t,可以看到它们访问的地址。一般有类似[11/Jan/2009:04:03:07 +0800] "GET /bbs/thread-7125-1-1.html HTTP/1.1" 200 7375 "-" "Baiduspider+(+http://www.baidu.com/search/spider.htm)"其中200代表正常收录了。7375代表这次抓取的7375个字节的内容。如果不是这样的情况,那是具体服务器设置不同。

一般每天注意观察日志,多看几次,就能大概知道蜘蛛来访的频率。重要是的,你要每天坚持有规律的更新,蜘蛛来的也会相对规律些。

 

 

扫描二维码分享到微信

在线咨询
联系电话

15929322171