度搜索引擎的工作 理

1、搜索引擎抓取程序：蜘蛛
搜索引擎为了可以自动抓取互联网 面数以万计的网页， 须有 个 自动的页面抓取程序。而这个程序我们 般称之为“蜘蛛”（也可以叫做“机器人”）。那么不同的搜索引擎的蜘蛛，叫法也就不同了。 度的抓取程序， 般称为 度蜘蛛。
谷歌的抓取程序， 般称为谷歌机器人。
360的抓取程序， 般称为360蜘蛛。
其实，不管叫做蜘蛛，还是机器人，你 要知道这个指的是搜索引擎的抓取程序，就可以了。蜘蛛的任务很简单，就是顺着链接不断的抓取互联网 ，自己还没有收录过的网页和链接，然后将抓取到的网页 息和链接 息存储到自己的网页数据库中。而这些抓取到的网页，将有机会出现在 终的搜索结果中。
 

2、怎么让蜘蛛来抓取我们的网站
通过 面对蜘蛛的解释，我们能够知道：要想自己的页面 终出现在搜索结果中，首先得让蜘蛛抓取到我们的网站。通过下面三种方法可以让蜘蛛来抓取我们的网站
外部链接：我们可以在 些已 被搜索引擎收录的网站 面发布自己网站的链接，以此吸引蜘蛛，或者交换友情链接也是 个常用的方法。
提交链接： 度为站长们提供了链接提交的工具，通过这个工具，我们 需要通过这个工具提交给 度，那么 度就会派出蜘蛛来抓取我们网页了。

3、影响蜘蛛抓取的因素

（1）网址不能过长： 度建议网址的长度不要 过256个字节（ 个英文字母（不分大小写））占 个字节的空间， 个中文汉字占两个字节的空间）。

（2）网址中不要 含中文： 度对于中文网址的抓取效果都是 较差的，所以在网址内千万不要带有中文。

（3）服务器问题：如果你的服务器质量太差， 是打不开，那么也会影响蜘蛛的抓取效果。

（4）Robots.txt屏蔽：有的SEO人员由于疏忽。在Robots.txt文件里面屏蔽了想要被 度抓取的路径或者页面。这也会影响到 度对于我们网站的抓取效果。

（5）注意动态参数不要太多太复杂，目 度对动态URL已 有了很 的处理，但是参数过多且复杂的url有可能被蜘蛛认为不重要而抛弃。这点尤为重要， 定注意。