1.2.4常见的搜索引擎 目前国内主流的5大搜索引擎分别为谷歌、百度、360搜索及搜狗搜索。具体介绍如下。 知识点概述 1.2 了解搜索引擎 1 3 1.2 了解搜索引擎 1.2.4常见的搜索引擎 目前，国内主流的5大搜索引擎分别为谷歌、百度、360搜索以及搜狗搜索。具体介绍如下。 知识点概述 1.2 了解搜索引擎 1.2.5搜索引擎工作原理 搜索引擎工作原理非常复杂，大致可以分为3个阶段：爬行与抓取、预处理、排名。具体介绍如下。 知识点概述 1.2 了解搜索引擎 1.2.5搜索引擎工作原理 搜索引擎工作原理非常复杂，大致可以分为3个阶段：爬行与抓取、预处理、排名。具体介绍如下。 知识点概述 爬行与抓取是搜索引擎第一步工作，也就是在互联网上发现、搜集网页信息，同时对信息进行提取和建立索引库。 NO.1 爬行与抓取 蜘蛛 跟踪链接 吸引蜘蛛 地址库 文件存储 爬行时检测内容 1.2 了解搜索引擎 1.2.5搜索引擎工作原理 搜索引擎工作原理非常复杂，大致可以分为3个阶段：爬行与抓取、预处理、排名。具体介绍如下。 知识点概述 蜘蛛指一种自动爬行访问和抓取网页信息的程序或脚本。其主要作用是浏览信息，然后把这些信息都抓到搜索引擎服务器上，建立索引库。 常见的蜘蛛有百度蜘蛛、Google蜘蛛搜狗蜘蛛等。 NO.1 爬行与抓取 （1）蜘蛛 1.2 了解搜索引擎 1.2.5搜索引擎工作原理 搜索引擎工作原理非常复杂，大致可以分为3个阶段：爬行与抓取、预处理、排名。具体介绍如下。 知识点概述 为了抓取更多的链接蜘蛛会跟踪页面上的链接，从一个页面到另一个页面，就像蜘蛛在网上爬行一样。 蜘蛛爬行的策略分两种，即深度优先搜索和广度优先搜索。 NO.1 爬行与抓取 （2）跟踪链接 1.2 了解搜索引擎 1.2.5搜索引擎工作原理 搜索引擎工作原理非常复杂，大致可以分为3个阶段：爬行与抓取、预处理、排名。具体介绍如下。 知识点概述 深度优先搜索：即蜘蛛沿着发现的链接一直向前爬行，直到再也没有其他链接。然后返回到第一个页面，再沿着另一个链接一直向前爬行。 NO.1 爬行与抓取 （2）跟踪链接 1.2 了解搜索引擎 1.2.5搜索引擎工作原理 搜索引擎工作原理非常复杂，大致可以分为3个阶段：爬行与抓取、预处理、排名。具体介绍如下。 知识点概述 广度优先搜索：蜘蛛在一个页面上发现多个链接时，不是顺着一个链接一直向前，而是把页面上所有的第一层链接爬行完后再沿着第二层页面上发现的链接爬向第三层链接。 NO.1 爬行与抓取 （2）跟踪链接 1.2 了解搜索引擎 1.2.5搜索引擎工作原理 搜索引擎工作原理非常复杂，大致可以分为3个阶段：爬行与抓取、预处理、排名。具体介绍如下。 知识点概述 理论上蜘蛛会自动抓取所有的网页，但实际上回因为其他因素影响而不能抓取完网页。所以想要网站有更多的收录，就要想办法吸引蜘蛛。 NO.1 爬行与抓取 （3）吸引蜘蛛 1 2 3 4 1.2 了解搜索引擎 1.2.5搜索引擎工作原理 搜索引擎工作原理非常复杂，大致可以分为3个阶段：爬行与抓取、预处理、排名。具体介绍如下。 知识点概述 为了避免蜘蛛重复爬行和抓取网址，搜索引擎会建立一个地址库，记录下没有被抓取的页面，以及被抓取的页面。 地址库链接的主要来源有以下4方面。 NO.1 爬行与抓取 （4）地址库 1 2 3 4 1.2 了解搜索引擎 1.2.5搜索引擎工作原理 搜索引擎工作原理非常复杂，大致可以分为3个阶段：爬行与抓取、预处理、排名。具体介绍如下。 知识点概述 文件储存是搜索引擎蜘蛛抓取的数据被存入原始页面数据库。其中的页面数据与用户浏览器得到的HTML是完全相同的。每个URL都有一个独特的文件编号。 NO.1 爬行与抓取 （5）文件存储 1.2 了解搜索引擎 1.2.5搜索引擎工作原理 搜索引擎工作原理非常复杂，大致可以分为3个阶段：爬行与抓取、预处理、排名。具体介绍如下。 知识点概述 当蜘蛛爬行和抓取文件时会进行一定程度的内容检测，遇到权重低的网站上大量转载或抄袭内容时，便不再继续爬行。 NO.1 爬行与抓取 （6）爬行时检测内容 1.2 了解搜索引擎 1.2.5搜索引擎工作原理 搜索引擎工作原理非常复杂，大致可以分为3个阶段：爬行与抓取、预处理、排名。具体介绍如下。 知识点概述 因为搜索引擎数据库网页较多，用户搜索后，索引计算量太大，很难在
