二、蜘蛛抓取情况

1、是否有蜘蛛来访问

搜索引擎蜘蛛有哪些我们都知道吧，如果是做国内用户的话就主要看看百度、360、搜狗蜘蛛是否按时到访，做外贸的网站就要注重谷歌蜘蛛是否按时到访，新站上线后要时刻关注蜘蛛来访记录，如果发现哪个蜘蛛没来的话就要检查网站的robots文件设置是否有问题。

注意：新站的日志上如果出现这个百度蜘蛛IP：121.14.89.*。表示这个新站已经摆脱了新站考察期，可以放心继续努力了。

2、抓取了哪些目录

通过蜘蛛抓取网站目录的情况，查看网站重要的目录是否被抓取，如果这些目录没有被抓取，看是不是网站的内链是不是不对，就需要对网站内链进行调整，如果网站内链没问题就需要增加网站外链，引导蜘蛛来抓取。

注意：如果不希望一些毫无意义的目录或者不想让蜘蛛抓取的信息，建议用robots屏蔽掉。

3、抓取了哪些页面、图片

就像访客会对一些页面或者图片青睐，蜘蛛也有自己喜欢抓取的页面、图片，这样就可以分析这些页面图片和其它页面有什么不同，为其他页面、图片优化提供了参考物。

注意：对于蜘蛛不抓取的页面，可以查看是不是这些页面出现了页面重复、url不规范等问题。

4、蜘蛛访问次数、停留时间、抓取量

任何一个网站都希望蜘蛛来的勤快些，因为访问次数越频繁、停留时间越长、抓取的页面越多就说明蜘蛛喜欢这个网站，如果发现蜘蛛停留时间长但是抓取量 少，需要查看是不是网站的访问速度有问题、蜘蛛对网站内容抓取困难或者网站文章质量偏低蜘蛛不喜欢。因此为了获取搜索引擎的好感，需要网站每天有规律性的 更新高质量内容。

注意：新站上线后，如果发现蜘蛛已经爬取过网站内容，这就说明搜索引擎已经开始对你的网站进行新站考察。这时就不要轻易修改网站结构、网站域名、网站程序、网站标题、关键词、描述等，否则会加长百度考察期。

提升网站排名的秘密：在一段时间里就可以知道蜘蛛每天都是什么时间段来访问网站，然后在搜索引擎蜘蛛来访问网站时去更新站内内容，这样利于页面快速收录。