为什么网站日志里找不到机器人的痕迹?
"18、我如何知道百度蜘蛛和Google机器人是否来过?
通过查看网站日志的方式,我们可以获知百度蜘蛛和Google机器人是否来过。
网站日志如何看呢?从网站空间商那边获得Ftp的iP地址和用户名、密码,然后进入网站后台,查找是否有一个包含log字眼的文件,这个就是日志文件。
打开,下载里面的文件包,然后在里面搜索baiduspider,和googlebot,如果有很多,则说明百度蜘蛛和Google机器人过来很多。
如果你的网站没有看到日志,则是因为你的空间没有开通日志功能。这要么让空间商开通,要么就没办法。
但也存在,有日志,但没有记录百度蜘蛛和Google机器人的情况。这种情况,如果一定要看,则只能拿着IP,一一去百度搜索,看看是不是百度的蜘蛛。"
我的就是这个问题,半个月的日志找不到机器人的痕迹,但期间有快照,想请教最后一行的拿IP去百度搜,具体怎么操作.用网站服务器的IP吗?
龙阳解答:你日志里,有没发现很多ip地址?拿出来在百度上搜索下,看看其他人是否有在讨论这个ip地址。比如google机器人IP地址就是一个IP段,你去网上查相关资料,找到搜索引擎的机器人IP段,再一个个排查就是了,不过这样比较麻烦。不过针对这种情况,我也没找到更好的办法
Tags: SEO相关问题
