网站优化工作中的步是爬取；搜索引擎的蜘蛛等同于用户在爬取网页页面时应用的电脑浏览器。当搜索引擎浏览页面时，缺少对象HTML编码，spider程序流程将接受到的编码储存到初始页面数据库查询中。以便提升爬取和爬取的速率，搜索引擎应用好几个蜘蛛另外爬取。当蜘蛛浏览一切网站时，他们先浏览网站网站根目录中的robots.txt文件。假如robots.txt文件阻拦搜索引擎爬取一些文档或文件目录，则爬取器将遵照协议书，而不容易爬取被严禁的页面。全部互联网技术由相连接的网站和网页页面构成。理论上，蜘蛛能够 顺着连接从一切页面爬取到网站上的全部页面。在其中，非常简单的爬取解析xml对策分成二种，一种是深度优先，另一种是深度广度优先选择。不论是深度优先還是深度广度优先选择，要是给蜘蛛充足的時间，他们就可以爬上全部互联网技术。在具体工作上，蜘蛛的网络带宽資源和時间并并不是无尽的，不太可能爬过许多 页面。搜索引擎蜘蛛捕捉储存在初始页面数据库查询中的数据信息。页面数据信息与客户电脑浏览器得到的HTML完全一致。每一个URL都是有一个唯一的文件号。

　　“预备处理”也称之为“索引”，由于索引是预备处理的关键流程。搜索引擎蜘蛛爬取初始页面，不可以立即用以查寻排名解决。它务必历经预备处理环节才可以从HTML文档中删掉标识和程序流程，并获取可用以排名解决的web页面的文字內容。蜘蛛对获取的汉语英语单词开展切分，除去终止词，清除噪音，清除反复，获取网页页面中的关键英语单词，创建关键字和网页页面索引，产生索引词汇表。在索引创建全过程中，有顺向索引和反方向索引二种排序方法，促使排列更为精确。此外，路由协议关联的测算也是预备处理的一个关键一部分。现阶段流行搜索引擎的排名要素都包含网页页面中间的连接流信息内容。搜索引擎爬取页面內容后，务必提早测算：页面上的什么连接偏向什么别的页面，什么页面导进连接，什么说明***文字用以连接，这种繁杂的连接偏向关联产生了网站和页面的连接权重值。

　　当搜索引擎蜘蛛爬取页面，索引程序流程测算出反方向索引后，搜索引擎随时随地能够 解决客户的检索要求。搜索引擎关键解决客户搜索关键词的分词算法，终止文本编辑、命令解决、语法错误改正、检索处罚融合等解决，使搜索关键词与搜索引擎索引词汇表配对，创建排名。

　　今年百度优化排名的基本准则是有关之上三点。伴随着搜索引擎的规范化，排名标准更为智能化系统，SEO越来越更为无法实际操作。但是，全部排名的关键全是紧紧围绕客户的要求开展排名，因此 要搞好感受来满足需求，但你的网站离主页也很近。