大家都知道，百度蜘蛛抓取的内容，是通过大家制造大量的网站内容来获取的。但是百度蜘蛛在抓取的时候并不是乱七八糟、没有原则的随意抓取网站的内容。它也是有组织、有计划的去抓取的。因此搞清楚搜索引擎的抓取规则对于我们网站的优化有很大的帮助。我们以零散的方式来给大家理一下百度蜘蛛的爬行轨迹：

　　百度蜘蛛的爬行时间是分时间段的。不会一次性的爬行完一个网站，而是分不同的时段分别取爬行，然后计算出蜘蛛在网站的爬行时间。

　　对于一些新站来讲，网页被抓取后不会马上被放出来。搜索引擎会经过详细的计算，考虑次网站是否有必要被收录数据库。

　　搜索引擎会将抓取回来的内容，对其进行分析，把抓取到的文本和链接分离。然后再将分离出来的链接和锚文本记录，并交给数据库进行分析，最后放入网址索引库。

　　说到这里，我告诫大家，避免在百度蜘蛛爬行网站的时候，出现网页打不开或者死链的情况。这样的话，百度蜘蛛会立即终止爬行。我们通常会错误的以为，网站域名的年龄越久，对于搜索引擎越友好。但是这种情况的前提是你的网站没有过度优化的迹象、没有死链等。

　　了解了百度搜索引擎蜘蛛的工作原理解析之后就明白怎么去推广和优化了。总结一下，我们的目标就是让蜘蛛来爬行我们的网站，所以就要不断的努力提高权重和更新网站内容，内容很重要!