-
作为SEO从业者,不仅要被搜索引擎抓取,还要被收录,最重要的是在收录后有良好的排名,本文将简单分析下搜索引擎收录网页的四个阶段。每个网站、每个网页的排名都是不一样的,看看你的网站处于哪个阶段呢?
网页收录第一阶段:大小通吃
搜索引擎的网页抓取都是采取「大小通吃」的策略,也就是把网页中能发现的链接逐一加入到待抓取URL中,机械性的将新抓取的网页中的URL提取出来,这种方式虽然比较古老,但效果很好,这就是为什么很多站长反应蜘蛛来访问了,但没有收录的原因,这仅仅是第一阶段。
网页收录第二阶段:网页评级
而第二阶段则是对网页的重要性进行评级,PageRank是一种著名的链接分析算法,可以用来衡量网页的重要性,很自然的,站长可以用PageRank的思路来对URL进行排序,这就是各位热衷的「发外链」,据一位朋友了解,在中国「发外链」这个市场每年有上亿元的规模。
爬虫的目的就是去下载网页,但PageRank是个全局性算法,也就是当所有网页有下载完成后,其计算结果才是可靠的。对于中小网站来讲,服务器如果质量不好,如果在抓取过程中,只看到部分内容,在抓取阶段是无法获得可靠的PageRank得分。
网页收录第三阶段:OCIP策略
OCIP策略更像是PageRank算法的改进。在算法开始之前,每个网页都给予相同的「现金」,每当下载某个页面A后,A将自己的「现金」平均分给页面中包含的链接页面,把自己的「现金」清空。这就是为什么导出的链接越少,权重会越高的原因之一。
而对于待抓取的网页,会根据手头拥有的现金多少排序,优先下载现金最充裕的网页,OCIP大致与PageRank思路一致,区别在于:PageRank每次要迭代计算,而OCIP则不需要,所以计算速度远远快于PageRank,适合实时计算使用。这可能就是为什么很多网页会出现「秒收」的情况了。
网页收录第四阶段:大站优先策略
大站优先的思路很直接,以网站为单位来衡量网页的重要性,对于待抓取的URL队列中的网页,根据所述网站归类,如果哪个网站等待下载的页面最多,则优先下载这些链接。其本质思想是「倾向于优先下载大型网站URL」。因为大型网站往往包含更多的页面。鉴于大型网站往往是名站,其网页质量一般较高,所以这个思路虽然简单,但有一定依据。
实验表明这个算法虽然简单粗暴,但却能收录高质量网页,很有效果。这也是为什么许多网站的内容被转载后,大站却能排到你前面的最重要原因之一。
顶: 4 踩: 0来源:卢松松博客 QQ/微信:13340454
搜索引擎收录网页的四个阶段
| 阅读量 | 分类: 建站教程 | 作者: 卢松松
相关文章阅读更多:搜索引擎 PageRank
- 2019-08-20 Google新PR:以链接距离为基础的页面级别
- 2016-03-10 Google确认将停止公开提供PageRank
- 2014-11-25 Google官方表态:PageRank不会再更新了
- 2014-10-08 谷歌可能不会再更新PR了,至少不会再更新TBPR
- 2014-05-17 百度再次声明:世上本没有百度pagerank和权重
- 2013-12-07 2013年年底Google PR更新
- 2013-10-25 Matt Cutts在PubCon大会上暗示了未来SEO的方向
- 2013-10-09 Matt Cutts解释为什么工具栏PageRank不更新了
- 2013-10-08 Matt Cutts说:今年Google PR不会更新了
- 2013-09-28 给谷歌的“蜂鸟算法”泼瓢冷水
- 2013-06-27 从Google的链接政策谈如何正确做SEO
- 2011-10-08 谷歌PR值取消纯属误传
- 2011-08-17 PageRank与TrustRank影响因素分析
- 2009-05-28 端午节卢松松博客PR值由0直接升为4
- 2021-09-08凡是在卢松松博客投稿的作者都有机会得到IT类图书哦!
发表感想加入微信群
枫叶漂流网
我所说的接受就是大家通过搜索引擎真的能找到这个心建立的站点。
所以,新站其实不要太关注于被搜索引擎收录了多少。
而是自己做了多少有价值的内容,
和其他网站做了多少链接。
一些经验,跟大家共享。想聊一聊的加我QQ。
9000图
深圳网站建设
郑州乐居网
xinyu580淘宝信誉查询
电解铜价
醒妹网微电影
养生网
篱笆外小清新
维维网站建设
王牌网赚论坛
特色小食品
我要好梦网
广州杰达机电
广州驰马
夏瑜曦博客
worry
蘑菇街美丽说天猫购物
嘻哈境
星锐外景
摩托哈车一族
大连网站建设
淘宝seo电商圈
恶补seo只是。。。
向卢大 学习。。。
老罗
复利投资
黑苹果博客
喻拓
武汉旅游
龙三公子
蔬菜大棚
自慰器
OSAKI
好运品牌鞋
贝游记
程志昂
实实在在赚钱的项目
声卡驱动器官方下载
长沙格力空调维修
小创意
网吧桌椅
我要创富网
一品网赚
湛蓝天空
老李博客
安笙
龙天的博客
懒鱼
魏东东博客
紫光云助手竞价软件
精品原创博客集
智多网
跑步机什么牌子好
旅途者
同创天下
看TV网
孙云锋
室内设计博客
志造传奇
isaced
美丽女人邦
惠尚佳品商城
排水板
小林博客
厦门胡伟杰
香水批发
儿童乐园
奥特曼
餐饮软件
airoschou
泡媚吧
蘑菇窝
淘宝好在线
刘世华
杨登攀
石头
小怪兽
天下美景
跟我读自然
乌鲁木齐办证件
在这里能跟你学习很多很多的东西和知识以后会一直关注。
流量计
王攀博客
周瑞彬博客
我爱上QQ
网络传真
网络传真
天津seowin
物流保险
苦逼男
秀爱女性网
秀爱女性网
北京SEO无恒
王望奎博客