搜索引擎收录原理
搜索引擎收录原理
1.页面收录流程
在互联网中,URL是每个页面的入口地址,搜索引擎蜘蛛程序就是通过URL抓取到页面的。搜索引擎蜘蛛程序从URL列表出发,通过URL抓取并存储页面;同时,提取原始页面中的URL资源并加入到URL列表中。如此不断地循环,就可以从互联网中获取足够多的页面。
URL是页面的入口,而域名则是网站的入口。搜索引擎蜘蛛程序通过域名进入网站,从而展开对网站页面的抓取。换而言之,搜索引擎要在互联网上抓取到页面的首要任务就是建立一个足够大的域名列表,再通过域名进入相应的网站,从而抓取网站中的页面。
而对于网站来说,如果想要被搜索引擎收录,首要条件就是加入搜索引擎的域名列表。下面向读者介绍两种常用的加入搜索引擎域名列表的方法。
第一,利用搜索引擎提供的网站登录入口,向搜索引擎提交网站域名,例如Google的网站登录地址是//www.google.com/intl/zh-CN/webmasters/#?modal_active=none,可在此提交自己的网站域名。对于提交的域名列表,搜索引擎只会定期进行更新。因此,这种做法比较被动,从域名提交到网站被收录花费的时间也比较长。
第二,通过与外部网站建立链接关系,使搜索引擎可以通过外部网站发现我们的网站,从而实现对网站的收录。这种做法的主动权掌握在我们自己的手里(只要我们拥有足够多高质量的链接即可),县域收录速度也比向搜索引擎主动提交要快得多。根据外部链接的数量、质量及相关性,一般情况下,2-7天左右就会被搜索引擎收录。
2.页面收录原理
通过上面的介绍,相信读者已经掌握了网站被搜索引擎收录的方法。然而,怎样才能提高网站中页面被收录的数量呢?要回答这个问题,就要先了解搜索引擎收录页面的工作原理。
如果把网站页面组成的集合看作是一个有向图,从指定的页面出发,沿着页面中的链接,按照某种特定的策略对网站中的页面进行遍历。不停地从URL列表中移出已经访问过的URL,并存储原始页面,同时提取原始页面中的URL信息;再将URL分为域名及部URL两大类,同时判断资源为止。经过这些工作,搜索引擎就可以建立庞大的域名列表、页面URL列表并存储足够多的原始页面。
3.页面收录方式
上面已经介绍了搜索引擎收录页面的流程及原理。然而,在互联网数以亿计的页面中,搜索引擎怎样才能从中抓取到相对重要的页面呢?这就是涉及搜索引擎的页面收录方式。
页面收录方式是指搜索引擎抓取页面时所使用的策略,是为了能在互联网中筛选出相对重要的信息。页面收录方式的制定取决于搜索引擎对网站结构的理解。如果使用相册的抓取策略,搜索引擎在同样的时间内可以在某一网站中抓取到更多的页面资源,则会在该网站上停留更长的时间,收录的页面数自然也就更多。因此,加深对搜索引擎页面收录方式的认识,有利于为网站建立友好的结构,提高页面被收录的数量。
>>广度优先
如果把整个网站看作是一棵树,首页就是根,每个页面就是叶子。广度优先是一种横向的页面抓取方式,先从树的较浅层开始抓取页面,直至抓取完同层次的所有页面后才进入下一层。因此,在对网站进行优化时,我们应该把网站中相对重要的信息展示在层次较浅的页面上(例如,在首页上推荐一些热门产品或者内容)。反过来,通过广度优先的抓取方式,搜索引擎就可以优先抓取到网站中相对重要的页面。(高端网站建设)
首先,搜索引擎从网站首页出发,抓取首页上所有链接指向的页面,形成页面集合A,并解析出集合A中所有页面的链接;再跟踪这些链接抓取下一层的页面,形成页面集合B;就这样递归地从线层页面中解析出链接,从而抓取深层页面,直至满足了某个设定的条件才停止抓取进程。
>>深度优先
与广度优先的抓取方式相反,深度优先首先跟踪线层页面中的某一链接逐步抓取深层页面,直至抓取完最深层的页面后才返回浅层页面再跟踪其另一链接,继续向深层页面抓取,这是一种页面,这样就能满足更多用户的需求。
推荐新闻
更多行业-
网络经济的范围经济性
近几十年来,随着产业组织理论的更新与发展,范围经济性已经越来越被人们所...
2014-11-17 -
网站设计百科解读:怎样设计网站效果好
网站的成功与站点建设前的网站规划有着非常重要的关系。网站建设公司在建立...
2020-03-10 -
读图时代:图片带给我们什么
大数据时代,数据量实在太大,文字实在让人疲惫,数字更是让人作呕。于是,...
2014-03-06 -
如何完美增加关键词密度的有效办法
如何完美增加关键词密度的有效办法?北京网站建设公司EMC易倍体育官方中国(www.s...
2012-05-16 -
门户网站建设有哪些好的方法?
虽然现在门户网站建设较少,但仍有需求。网站建设小编今天给你一套门户网站...
2020-03-26 -
不以用户体验至上的SEO都是耍流氓
SEO是目前所有互联网企业必用的一种网络营销手段,是通过特殊技巧将...
2012-02-07
预约专业咨询顾问沟通!
免责声明
非常感谢您访问我们的网站。在您使用本网站之前,请您仔细阅读本声明的所有条款。
1、本站部分内容来源自网络,涉及到的部分文章和图片版权属于原作者,本站转载仅供大家学习和交流,切勿用于任何商业活动。
2、本站不承担用户因使用这些资源对自己和他人造成任何形式的损失或伤害。
3、本声明未涉及的问题参见国家有关法律法规,当本声明与国家法律法规冲突时,以国家法律法规为准。
4、如果侵害了您的合法权益,请您及时与我们,我们会在第一时间删除相关内容!
联系方式:010-60259772
电子邮件:394588593@qq.com