什么叫蜘蛛，蜘蛛的英文名是Spider，也称之为爬虫、机器人。蜘蛛其实就是搜索引擎的爬取程序，在我们人眼看不到的情况下行走于我们网站的各个网页内部，抓取一些他认为有用或者有价值的网页。那么蜘蛛是通过什么样的办法来收录我们的网页的，又是通过什么样的方法来辨别我们站内的内容的呢？

相信大家都看到过大自然中的蜘蛛，自然生活中的蜘蛛通常都是在一个地方织网，那个网就像一个八卦一样，一个网是由很多的小节点连接起来的。那么我们的搜索引擎爬取是通过什么来连接的呢？搜索引擎蜘蛛通过站内的链接从这个网页爬到另一个网页，只要你站内的链接没有断开或者出现死链接，那么蜘蛛会一直在你的站内进行爬取的。我们把链接分为两种，一种是用户可以点击的，一种是不可以点击的，我们很多人认为蜘蛛跟用户是一样的，只有通过可以点击的链接才能爬到你的网页，其实这种理解是错误的。

蜘蛛是爬取每个网页的源代码  ，他会收集源代码里带有“http”或者“cn、com、net”等这样的地址，然后再去爬取这些收集的地址。通过蜘蛛爬取的原理我们就可以理解为什么我们需要发外链，通过外部的链接让蜘蛛爬取到我们的站内，又通过我们站内的链接爬取我们整个网站。所以说站内跟站外链接都是很重要的，不得不说的是，蜘蛛更喜欢网站首页的链接。

蜘蛛爬取与百度快照的关系

一、蜘蛛爬取网站页面不等于该页面就会被收录

蜘蛛爬取后还需要经过一系列的审核程序，当他爬取的页面达到搜索引擎的最低收录要求的时候就会被允许收录，达不到的话这个页面就会被丢弃或者暂时保存，但并不会放出来。

二、百度快照更新快说明蜘蛛爬取该网站的频率非常高

网站的快照更新频率越快，那就可以肯定蜘蛛的爬取频率也是非常高的，因为快照是必须要蜘蛛爬取审核通过之后才能够实现的。

三、蜘蛛的爬取频率越高，网站的权重越高

一般来说搜索引擎对于某一个网站的爬取频率越高的话代表这个网站本身获得了搜索引擎很高的信用度或者有大量的反向链接指向该网站从而引导该网站进行爬取跟踪。所以提升网站的蜘蛛爬取频率有利于提升我们整个网站的权重，这就需要我们多做链接诱饵，稳定增加反向链接，保持固有的网站内容更新频率。