我们在做站群的时候，避免不了要大规模的生成大量的内容，一般都是靠采集+伪原创，Google对于伪原创的判别要比百度来的准的多，根据老猫掌握的数据，我们来看下Google是如何判断原创与伪原创的。首先我们要先掌握几个概念：
1.相似度
相似度是搜索引擎去重用的最多的算法，用的比较多的一种是TF/IDF算法，这个也是计算相关性的算法，TF-IDF的主要意思是说：如果某个词或短语在一篇文章中出现的频率高，并且在其他文章中很少出现，则认为此词或者短语具有很好的类别区分能力，适合用来分类。
2.数据指纹
当搜索引擎通过相似度把文章收集起来后，要判别一下是否是重复文章，经常用的就是数据指纹，数据指纹有很多种算法，常见的比如讲文章的标点符号提出，进行对比，你很难想象有两篇不同的文章，标点符合是一致的。还有对向量进行对比，也就是TF词频(关键词密度)等等来判断。
3.代码噪音
前面说的这些，都是基于一个条件的，就是搜索引擎要知道文章是什么，因为每个网站的模板都不同，代码也不同，各种信息混合在一起，如果能找到正文就是搜索引擎第一要处理的。 一般Google都会通过对代码的布局和噪音比例进行区分，哪些是导航，哪些是正文，并可以对一些典型的代码进行忽略。那么我们在做模板的时候，就要注意了。这里有个纠结点，就是整页面降噪，方便搜索引擎进行正文的确认，但是正文区要适当的加燥，增加搜索引擎识别重复性的难度。