怎么用代码检测搜索引擎蜘蛛的爬行记录？

查看蜘蛛爬去记录的方法有很多，软件、空间日志、插件等都可以。今天郑州网站优化给大家介绍一个用代码的方式来检查蜘蛛爬行记录的方法。了解了蜘蛛的爬行时间和规律，也有利于发现网站的问题。

一、上传监测搜索引擎蜘蛛爬行的代码
上传robots.php文件到你的网站空间的模板目录下面，例如wordpress网站，那么就应该上传到/wp-content/themes/你启用的主题文件，这个目录里面。robots.php这个文件的名字可以自己定义，改成其他的都可以，如abc.php。

二、安装监测搜索引擎蜘蛛爬行的代码
1、在WP后台，模板编辑的页面中，找到footer.php底部模板，在最后面插入代码：

2、接下来就是等待搜索引擎蜘蛛到你的网站来爬行了，爬行的结果记录在网站根目录的robotslogs.txt中，你直接打开http://www.YourDomain.com/robotslogs.txt就能看到了。当然你也可以修改robots.php文件的第37行，把robotslogs.txt换成任意你想要的名字。

 本文转自郑州网站优化，转载注明出处，找郑州SEO，首选众志SEO。