搜索引擎工作原理：预处理

       在前天我们在狄吉堂网站优化博客中分享搜索引擎工作原理：蜘蛛如何爬行和抓取网页，今天我们接着分享搜索引擎工作过程中一个非常重要的阶段，预处理，也就是大家常说的索引。当用户在搜索引擎中输入搜索词之后，搜索引擎并不是根据用户的搜索词然后来计算页面给予排名的，而是事先在爬行和抓取页面的时候就进行了预处理，要不然也不可能在很短时间内根据搜索词展现出排名。
0 F& |3 j/ D* u$ M6 i; v
, g  H" _5 ^- o' i
, S9 D+ w0 O8 n5 w% [' ~* `

搜索引擎工作原理：预处理

6 Z; `( c$ |, c

       首先，搜索引擎会对爬行的页面进行筛选和提取文字信息，以便进行排名处理，通过搜索引擎的这个动作，我们知道在页面中添加meta信息，图片的alt标签，锚文本的文字设定，a标记中的title标签还是非常有必要的。

+ F( c* k$ K! V/ U/ E4 E0 B1 F
       紧接着搜索引擎会对筛选出来的这一大堆文字进行分词处理，以此来判定哪些字可以组成一个词，比如狄吉堂网站seo，通常会被分成“狄吉堂”，“网站”，“SEO”。搜索引擎的分词过程一般有两种分法，一个是通过搜索引擎数据库中已经创建好的词典，另一种是根据日常统计，不过为了提高分词的效率，通常都是两种方法并行的。

' u1 t5 U* ?+ N* S8 N
       通过词典进行分词，是指搜索引擎根据自己创建的词典，跟网页中提取的文字进行匹配，如果匹配成功的话，就算分出了一个词，而根据日常统计则是指搜索引擎对网络上提取的文本做了大量的分析，哪些字经常出现在一起，那么就会把它判定为一个词组，不过搜索引擎更喜欢的是比较长的最大匹配词组，也就是我们常说的长尾关键词，因为这样显示出来的搜索结果将会更加精确。关于搜索引擎是如何进行分组的，大家可以参考网站快照中带颜色的词，这里说明这只是一个参考，因为网站快照所能提供的分词信息很少，有时也并不能完全表达出搜索引擎的意愿。而我们在这个环节能进行优化的就是，通过页面标题，H1标签，关键词加粗的方式来提示搜索引擎，这是一个词组，同时还有强调的作用。

6 m9 z+ I$ m9 V) X' L# t) {
       当搜索引擎分词完毕后，接下来要进行的工作就是去除这些词中的干扰信息，俗称“去噪”，搜索引擎去噪主要从两方面进行去噪，一个是把这些词组中一些完全跟网站主题无关的词组去掉，比如我们文章中经常包含的一些“的”，“啊”，“然而”之类的助词，感叹词和副词，进行去噪的第二步则是把网站中没有用的模块中包含的词组去掉，比如免责声明，广告字段，版权信息，分页列表等等，通过去噪后剩余的内容才是搜索引擎想要的内容。
9 |: F% R' E: P2 d! a) _( J
5 J: y2 s. x5 g" H) ?) ]- z( x; N5 W
       在搜索引擎获得了有用的信息之后，是不是我们就可以通过这些内容进行网页排名了？NO！接下来的这一步，我相信是很多站长比较心痛的一个环节——去重。搜索引擎会在这些得到的内容中提取出N个最能代表页面主题的关键词，进行指数分析，如果指数显示网上已经存在大量的相同信息，搜索引擎将会进行删除操作，这也就是为什么很多站长通过复制或转载来的文章不被收录展示的原因。在下一节的内容中，我们将会在狄吉堂网站SEO博客中继续跟大家分享搜索引擎工作原理中预处理的关键环节：正反向索引。

2 `. l: c2 i0 r% N
       原创文章如转载，请注明出处，本文首发于狄吉堂网站SEO优化博客
+ d1 S5 y+ O2 L7 J. u& t! ~8 Z8 f1 K( M
6 N" i& \* V8 e* D& I4 v1 b
       原文出处链接：http://www.dijitang.com/youhua/377.html
! |" s% _' L3 G/ g1 ~       得知论坛原创作者：狄吉堂网络营销
5 l( L  f0 c: t* |) R1 |9 o       日期：2015-08-27  
) ]3 j8 N8 c/ U9 d' q8 g
要不然也不可能       在前天我们在狄吉堂网站优化博客中分享搜索引擎工作原理：蜘蛛如何爬行和抓取网页，今天我们接着分享搜索引擎工作过程中一个非常重要的阶段，预处理，也就是大家常说的索引。当用户在搜索引擎中输入搜索词之后，搜索引擎并不是根据用户的搜索词然后来计算页面给予排名的，而是事先在爬行和抓取页面的时候就进行了预处理，要不然也不可能在很短时间内根据搜索词展现出排名。

! U' e. P) f% D: N6 E* s

搜索引擎工作原理：预处理

5 q1 i) }, E$ q" q& q

( r: n7 a$ ]  ^7 w; U       首先，搜索引擎会对爬行的页面进行筛选和提取文字信息，以便进行排名处理，通过搜索引擎的这个动作，我们知道在页面中添加meta信息，图片的alt标签，锚文本的文字设定，a标记中的title标签还是非常有必要的。
  N4 J* K" w( q  B+ h/ h$ E; m

       紧接着搜索引擎会对筛选出来的这一大堆文字进行分词处理，以此来判定哪些字可以组成一个词，比如狄吉堂网站SEO，通常会被分成“狄吉堂”，“网站”，“SEO”。搜索引擎的分词过程一般有两种分法，一个是通过搜索引擎数据库中已经创建好的词典，另一种是根据日常统计，不过为了提高分词的效率，通常都是两种方法并行的。
( y+ p: ?4 v# L( m& A& B8 Q# q* Y3 z8 M6 [
+ J3 @7 m( m& s' R! S/ u, k
       通过词典进行分词，是指搜索引擎根据自己创建的词典，跟网页中提取的文字进行匹配，如果匹配成功的话，就算分出了一个词，而根据日常统计则是指搜索引擎对网络上提取的文本做了大量的分析，哪些字经常出现在一起，那么就会把它判定为一个词组，不过搜索引擎更喜欢的是比较长的最大匹配词组，也就是我们常说的长尾关键词，因为这样显示出来的搜索结果将会更加精确。关于搜索引擎是如何进行分组的，大家可以参考网站快照中带颜色的词，这里说明这只是一个参考，因为网站快照所能提供的分词信息很少，有时也并不能完全表达出搜索引擎的意愿。而我们在这个环节能进行优化的就是，通过页面标题，H1标签，关键词加粗的方式来提示搜索引擎，这是一个词组，同时还有强调的作用。


       当搜索引擎分词完毕后，接下来要进行的工作就是去除这些词中的干扰信息，俗称“去噪”，搜索引擎去噪主要从两方面进行去噪，一个是把这些词组中一些完全跟网站主题无关的词组去掉，比如我们文章中经常包含的一些“的”，“啊”，“然而”之类的助词，感叹词和副词，进行去噪的第二步则是把网站中没有用的模块中包含的词组去掉，比如免责声明，广告字段，版权信息，分页列表等等，通过去噪后剩余的内容才是搜索引擎想要的内容。

: D" w0 }/ ?0 Z# c2 |3 e* L/ J
       在搜索引擎获得了有用的信息之后，是不是我们就可以通过这些内容进行网页排名了？NO！接下来的这一步，我相信是很多站长比较心痛的一个环节——去重。搜索引擎会在这些得到的内容中提取出N个最能代表页面主题的关键词，进行指数分析，如果指数显示网上已经存在大量的相同信息，搜索引擎将会进行删除操作，这也就是为什么很多站长通过复制或转载来的文章不被收录展示的原因。在下一节的内容中，我们将会在狄吉堂网站SEO博客中继续跟大家分享搜索引擎工作原理中预处理的关键环节：正反向索引。

2 s: v. G& x8 M8 s  z' t1 _
- ~' _1 e6 h% A/ U, x7 z6 Q7 h       原创文章如转载，请注明出处，本文首发于狄吉堂网站SEO优化博客


       原文出处链接：http://www.dijitang.com/youhua/377.html
2 K- a7 d4 i9 B. F3 T       得知论坛原创作者：狄吉堂网络营销
: Y. e6 B3 n% |# m( Q9 M: t# ^       日期：2015-08-27  

这些之前还真不怎么知道，多谢群主 很不错的帖子，谢谢楼主分享谢谢分享！
) n; M& e# k% @5 ~; ]" L' m4 {不错不错支持一下

我想骂我自己

这就是我斗胆的一点粗略分析，每天睡觉以前，我都会把您的帖子再三拜读，拜读。

还呕像.....

挨骂也是幸福～～～

做为老人！在吧里我都懒的都不想说话！送完经验我就走！

…没我说话的余地…飘走

相比他连说拜拜的 想法都没了 哈哈

哇~~` 你是不是投胎滴时候走错地方啦~``

哈哈 小心被她看见哦~~~~

呵呵 大家好奇嘛 来观看下~~~~

楼猪.重量级人物阿.

我的我的 忘记了 呵呵

笨点也好~~~~

这个站一周前刚刚有了点起色