Google如何判断伪原创的算法

做英文网站的朋友都会遇到语言的问题,完全原创的的难度比较大,所以一般会做一些伪原创处理,但是google的算法已经很强大,对于文章伪原创也有是别的一套算法。

Google主要是通过相似度、搜索指纹和代码噪音来判断文章是否原创。

相似度是搜索引擎去重用的最多的算法,主要依靠词频和反文档频率两个来判断。词频指的是某一个给定的词语在该文件中出现的次数。反文档频率指的是:如果包含词条的文档越少,反文档频率越大,则说明词条具有很好的类别区分能力。大概意思是如果某个词或短语在一篇文章中出现的频率高,并且在其他文章中很少出现,则认为此词或者短语具有很好的类别区分能力,适合用来分类。当两篇文章的特征向量趋于一致的时候,我们认为这两篇文章的内容接近,如果一致则说明是重复的。

数据指纹算法:当搜索引擎通过相似度把文章收集起来后,要判别一下是否是重复文章,经常用的就是数据指纹,数据指纹有很多种算法,常见的比如讲文章的标点符号提出,进行对比,因为对于两篇不同的文章,标点符合不太可能是完全一致的。指纹算法其核心在于统计出段落之中的标点符号有多少来分辩出原创还是伪原创,算法认为没有一篇的文章的标点符号数量一样的,只要算法中统计所有文章的符号和数量进行比对就能分辩出原创和伪原创的文章来,如果想避开这一算法可采用在伪原创文章中再插入其它段落,增加段与段之间的标点符号和数量来扰乱算法的对符号的计算工作。

Google

但是指纹算法肯定不只标点符号这一点这么简单,猜测文字信息提取指纹的要素一般为下面信息:标题、作者、发布时期、修改日期、主要关键词。其中关键词的选取可以有几种方法:提取网页中设置的keywords与description、信息中出现频率高的8个关键词、文章开头或结尾一段话、文章中固定位置的一段话。

有了这些代表信息后,便可以形成指纹信息,若再对这些信息进行Hash运算、MD5等方式加密、变化,生成一段定长(如256字节)的信息,就可以作为该信息的“指纹”,经过加密主要是防止对信息内容的篡改和对指纹的替换。这种方法有些象数字签名技术,但要相对简单,并且不进行加密运算时的标题等信息可以直接作为检索的关键字使用,统计信息表明:对一个文本信息提取指纹,当选取8个关键词及其词频作为其指纹时,准确度在98%以上,查全率在30%左右。这说明要能“概括”该信息,找出其8个使用频率最高的词汇,基本可以代表这个信息。

所以在我们进行伪原创或使用一些伪原创工具的时候,如果只是把关键词进行了替换,标点符号指纹是不变的,甚至连词频都不变。还有对文章进行段落的重拍,这个的确是打乱了标点符号,但是向量和词频问题依然存在。

代码噪音:前面说的这些,都是基于一个条件的,就是搜索引擎要知道文章是什么,因为每个网站的模板都不同,代码也不同,各种信息混合在一起,如果能找到正文就是搜索引擎第一要处理的。一般Google都会通过对代码的布局和噪音比例进行区分,哪些是导航,哪些是正文,并可以对一些典型的代码进行忽略。那么我们在做模板的时候,就要注意整页面降噪,方便搜索引擎进行正文的确认,但是正文区要适当的加燥,增加搜索引擎识别重复性的难度。

 

怎样优化手机与平板网页搜索结果

手机移动市场快速发展。如果想抓住手机市场,不仅是网页开发人员与设计人员,我们都需要去适应新的手机市场的搜索规则。手机搜索引擎优化有它独有的不同于网页版的一些规则,以下是一些对于优化手机市场重要的地方:

1. 手机用户在搜索时一般使用短的关键词/描述

手机用户在搜索时一般使用比较短的短句或关键词。主要原因还是手机键盘操作不方便。一般查询的关键词是1到2个,如果你没有简短的关键词排名,那你可能要流失一大部分手机用户。

2476235_114740442197_2

2.  搜索信息本地化

手机用户大多搜索本地的信息。除了简短的关键词之外,手机用户一般一般针对本地的信息搜索。比如用户在某个地方,搜索附近的东西,寻找附近的饭店,或者某个路线。比如在南京,关于“新街口”相关的搜索应该会很多。

3.符合当前的手机搜索的一些热门信息

体育比赛结果,新闻,天气,金融等是手机搜索中比较热门的。手机用户一般搜索附近的饭店,购物区,体育比赛结果,热门新闻,天气情况,市场信息以及其他类似的主题,最好是能提供时间以及定位的服务,这个现在很受欢迎。如果你的网站其中之一的主题,但是你的网站对于手机搜索并不友好那么你会流失很多的访客。甚至我们可以考虑开发两种版本,一个是针对普通的网页版,一个针对手机版。

4.在手机网页中,要做到前三名

用户不喜欢很长的下拉页面以及翻页等。网页版用户不喜欢有很长的下拉列表的页面,手机版用户更不喜欢这一点。网页版一般一页显示10条搜索结果,所以前10名都在首页,但是对于手机用户来说一屏只能显示前四个甚至三个,所以严格来讲手机用户的第一页必须排到前三名,这样是最具有吸引力的位置。

5.增加网站的手机平台目录入口

将网站提交到手机搜索引擎、手机门户网站、手机网址导航以及目录书签网站等。能有来自谷歌或其他搜索引擎的访客最好,但是如果你想要更多的流量,以上提到的几点就显得很重要了。目前这些手机导航资源为带来流量提供了很大的帮助,所以不要忽视他们。很多手机用户往往不用搜索引擎,而是到一些他熟悉的目录网站去找。如果你的网址刚好列在上面,用户可能就会直接从目录网站而不是搜索引擎进入你的网站。举个例子,如果你是一家pizza的饭店,那么你需要将网站提交到包含所有pizza店目录或者包括你所在位置的所有饭店的目录。

6. 遵循手机通信标准

手机搜索与传统搜索不同,如果你的网站想要被抓取应该遵循它的规则。查看万维网协议中关于移动通信网站的标准。即使你的网站不符合移动通信标准,它可能也会被列在搜索结果中,但如果你遵循相关标准,结果可能会让你大吃一惊。转码器将普通的网页转换成手机网页的格式,但是并不是所有的都能成功。

7.注意meta.txt文件

meta.txt文件是用于简要介绍你的网站信息以及最佳版本。搜索引擎爬虫可直接读取meta.txt文件(存放在根目录下),所以即便你的网站不能成功访问,你可能依然会出现在搜索结果中。Meta.txt 类似网页版的robots.txt但同时也像我们网页中的mate标签,因为你可以将描述放进去(类似我们平时的描述与关键词)。meta.txt内容是用冒号隔开的与robots.txt类似。文件中的格式类似:<fieldname>:<value>。meta.txt的好处在于可以易于搜索引擎和用户识别。

8.手机搜索中不要使用冗长的页面

移动用户往往没有时间阅读很长的页面,所以最好使用简短的文章。我们之前提到了手机搜索用户不喜欢长的关键语句,同样他们更不喜欢长的页面。所以最好能开发一个针对手机的专业简洁版本。简短的网页并不意味着你要忽略关键词,关键词是在移动搜索中是相当重要的,所以不要忽略他们,但是也不要堆积关键词。

9.提示预测搜索在手机用户中很受欢迎

    搜索提示在网页版中很常见。移动搜索中也很受欢迎,因为这样可以减少打字。如果你的关键词包含在这些可能的搜索中,会增加网页被搜索的机会。当然,关键词是不断变化的,我们不可能完全正确,但至少可以努力试一下。

10.观察预览手机版网站情况

要随时观察手机版网站的情况。随着手机性能的不断改良以及手机屏幕的不断改变,我们不可能时时检查网站的情况,但是我们可以有针对性的监测一些关键点。因为即便用户通过手机搜索引擎来到你的网站,如果网站显示的是一个扭曲的乱码之类的状态,用户会离开,且留下不好的印象。转码是网站乱码的原因之一,所以让你的网站遵循移动互联规则而不是依靠搜索引擎的转码是非常重要的。

手机搜索是一个新兴的但是可预见未来非常重要的领域。如果你不确定你的网站是否值得针对移动搜索优化,可以使用google adword工具在确定你的关键词在手机搜索的情况。如果搜索量很多,或者某个特定的词非常好,那么就投入更多的时间和精力去优化。

 

Google斑马算法更新

Google继去年的企鹅与熊猫算法更新后,在2013年2月推出“斑马”算法,此次算法并没有找到官方的出处,很多人对它的真假性存在怀疑,但是它提到的一些点确实有参考性。

• Too many retweets with keywords included around a link

• Facebook updates with too many shares from people not in your industry

• Any Google+ shares as this will look spammy (Google+ is a graveyard right, so any activity looks suspicious?!)

2012年的两大算法更新,其中熊猫算法针对的是打击低质量内容网站,核心在于站内;企鹅算法的重点倾向于打击低质量外部链接,核心在于网站的外部建设;而此次的斑马算法则是针对社交网络,不管此次算法更新是否真实,社交网络一直在网站推广占重要比重。

1. twitter过多的针对同一关键字同一链接的转发,个人理解如利用僵尸粉,大量的转发或发布针对同一关键词同一链接。

2. Facebook中大量的分享,但是这些分享人并不属于你的行业,或者相关行业。个人理解如花钱或利用大量的僵尸粉做一些转发,这些转发在斑马算法中会被识别惩罚。

3. 任何在Google+上做类似以上两种方法的将被视为垃圾内容。
Google zebra update

 

关于4G网络

4G是第四代移动通信及其技术的简称,是集3G与WLAN于一体并能够传输高质量视频图像且图像传输质量与高清晰度电视不相上下的技术产品。 4G系统能够以100Mbps的速度下载,比拨号上网快2000倍,上传的速度也能达到20Mbps,并能够满足几乎所有用户对于无线服务的要求。此外,4G可以在DSL和有线电视调制解调器没有覆盖的地方部署,然后再扩展到整个地区。 很明显,4G有着不可比拟的优越性。

4G