什么是搜索引擎蜘蛛爬行？

爬行指的是搜索引擎蜘蛛从已知页面上解析出链接指向的URL，然后沿着链接发现新页面（也就是链接指向的URL）的过程。当然，蜘蛛并不是发现新URL马上就爬过去抓取新页面，而是把发现的URL存放到待抓地址库中，蜘蛛按照一定顺序从地址库中提取要抓取的URL。

蜘蛛爬行又分爆发式爬行、稳定式爬行、确认式爬行这三种。

爆发式爬行。
有时候，百度蜘蛛会在一两分钟内，光顾你的网站好几次。不用怕，这种爆发式的爬行，一般是很少出现的。有些时候，它爬行一段时间以后，需要去运算程序，看看原来有没有来体验过，判断网站的内容是否为原创等等。所以，在很短的时间内，它可能多次光顾你的网站，这也是不足为奇的。网站的内容，可能会经受蜘蛛的多次考验，所以，千万不要直接复制粘贴别处的资料过来。

稳定式爬行。
稳定式爬行，就是每天，每个小时的爬行量都差不多。这种爬行，往往是在新站才会出现。如果一个网站已经建成好久了，并且有了不错的排名、权重，这时候，如果蜘蛛来你的网站爬行，还出现这种爬行方式，你就要小心了。出现这种爬行方式，多是蜘蛛对你的网站有不满之处，要找原因，及时应对，否则就等着蜘蛛给你降权吧。

确认式爬行。
确认式爬行，就是蜘蛛爬行体验网站更新的内容以后，不一定就会马上收录，还要经过程序的运算等，然后再次进行爬行体验，再确认是否要收录，是否有必要收录。通常情况下，蜘蛛不会爬行四次，如果三次爬行以后，还没有被收录，也就没有多大的希望能被收录了。

这种爬行方式，多见于网站的首页。一个网站，其首页，每天不知道要被蜘蛛爬行体验多少次，但是其他的内页，则要等蜘蛛进行计算，觉得有必要收录的话，才会再次爬行体验，看看是否有收录的必要。由此可见，网站的首页是网站优化建设的重中之重，一定要做好网站的首页优化。