上篇文章筆者和大家介紹了關(guān)于panda算法中關(guān)于重復(fù)內(nèi)容的說(shuō)明，但是想必依然有朋友不是特別了解到底怎樣頁(yè)面算是重復(fù)文字頁(yè)面。由此下面的文章我們來(lái)介紹一些在我們SEO優(yōu)化中會(huì)常遇到的重復(fù)文字頁(yè)面的形式。其中或許是為了SEO優(yōu)化達(dá)到某種效果而刻意為之，也有的是我們無(wú)意而為的。不過(guò)不論是怎樣形式詞重復(fù)文字頁(yè)面都是我們以后在SEO需要注意的。

    1、“www”與非www

    對(duì)于站點(diǎn)范圍內(nèi)的重復(fù)內(nèi)容，這可能是最大的罪魁禍?zhǔn)?。無(wú)論我們的內(nèi)部路徑錯(cuò)誤還是吸引了指向錯(cuò)誤URL的鏈接提及，我們都為URL的“www”版本和非www（根域名）版本建立了索引。在大多數(shù)情況下，301重定向是我們的最佳選擇。這是一個(gè)常見(jiàn)的問(wèn)題，對(duì)于這種情況，Google擅長(zhǎng)執(zhí)行重定向。我們可能還需要在Google網(wǎng)站站長(zhǎng)工具中設(shè)置我們的首選地址。在站點(diǎn)配置>設(shè)置下，我們應(yīng)該看到一個(gè)名為“首選域名”的部分（百度這邊一般我們會(huì)通過(guò)根目錄或則服務(wù)器來(lái)做好重定向進(jìn)行提交）。我們需要為網(wǎng)站的“www”和非www版本創(chuàng)建GWT配置文件才能設(shè)置首選域名。如果我們遇到主要的規(guī)范化問(wèn)題，建議我們這樣來(lái)操作。如果不是，那么我們可以任由其任，讓Google確定首選域名。

    2、登陸服務(wù)器

    盡管不如根域名重定向常見(jiàn)，但此問(wèn)題通常也是由子域引起的。在典型情況下，我們正在設(shè)計(jì)新網(wǎng)站以進(jìn)行重新啟動(dòng)，網(wǎng)站設(shè)計(jì)人員會(huì)為新網(wǎng)站設(shè)置了一個(gè)子域，而他們無(wú)意中將其開(kāi)放給抓取工具。我們最終得到的是兩組索引化的URLS。這樣我們最好的選擇是通過(guò)使用Robots.txt阻止登陸站點(diǎn)來(lái)防止此問(wèn)題發(fā)生。但是，如果我們發(fā)現(xiàn)登陸站點(diǎn)已建立索引，則可能需要對(duì)這些頁(yè)面進(jìn)行301重定向或?qū)λ鼈冞M(jìn)行Meta Noindex。

    3、尾部斜杠（“/”）

    盡管這不是搜索引擎優(yōu)化問(wèn)題，但是它曾經(jīng)是一個(gè)人們經(jīng)常會(huì)質(zhì)疑的問(wèn)題。從技術(shù)上講，在原始的HTTP協(xié)議中，帶斜杠的URL和不帶斜杠的URL是不同的URL?，F(xiàn)在幾乎所有瀏覽器都會(huì)在幕后自動(dòng)添加斜線并以相同方式解析兩個(gè)版本。

    4、安全（https）頁(yè)面

    如果我們的站點(diǎn)具有安全頁(yè)面由“https：”協(xié)議指定，則可能會(huì)發(fā)現(xiàn)安全版本和非安全版本都已建立索引。當(dāng)來(lái)自安全頁(yè)面的導(dǎo)航鏈接也由于最終路徑相對(duì)安全而最終被保護(hù)時(shí)。理想情況下，這些問(wèn)題可以由站點(diǎn)體系結(jié)構(gòu)本身解決。在許多情況下，最好使用Noindex安全頁(yè)面在搜索索引中沒(méi)有位置。不過(guò)，我們最好的選擇是301重定向，要謹(jǐn)慎對(duì)待所有站點(diǎn)范圍的解決方案。如果我們將所有“https：”頁(yè)面301重定向到其“http：”版本，則最終可能會(huì)完全取消安全性。

    5、主頁(yè)重復(fù)項(xiàng)

    雖然問(wèn)題前三種形式都可以創(chuàng)建主頁(yè)重復(fù)項(xiàng)，但是主頁(yè)有一些獨(dú)特的問(wèn)題。最典型的問(wèn)題是根域和實(shí)際的首頁(yè)文檔名稱都會(huì)被索引。盡管可以使用301重定向解決此問(wèn)題，但通常最好在首頁(yè)上放置一個(gè)規(guī)范標(biāo)簽。主頁(yè)受到重復(fù)的唯一影響，而主動(dòng)的規(guī)范標(biāo)簽可以防止很多問(wèn)題。當(dāng)然，也要與我們的內(nèi)部路徑保持一致，這一點(diǎn)很重要。如果我們希望網(wǎng)址的根版本是規(guī)范的，但隨后鏈接到導(dǎo)航中的“/index.htm”，則每次爬網(wǎng)程序訪問(wèn)時(shí)，我們都會(huì)向Google發(fā)送混合信號(hào)。

    6、會(huì)話ID

    一些網(wǎng)站尤其是電子商務(wù)平臺(tái)使用跟蹤參數(shù)標(biāo)記每個(gè)新用戶。有時(shí)，該參數(shù)最終出現(xiàn)在URL中并被索引，實(shí)際上，我們可以為每個(gè)建立索引的會(huì)話ID和頁(yè)面組合添加一個(gè)副本。URL中的會(huì)話ID可以輕松將1000個(gè)重復(fù)的頁(yè)面添加到索引中。如果可能，在我們的網(wǎng)站/平臺(tái)上，最好的選擇是從URL中完全刪除會(huì)話ID，并將其存儲(chǔ)在Cookie中。創(chuàng)建這些URL的理由很少，也沒(méi)有讓機(jī)器人抓取它們的理由。如果這樣做不可行，那么最好在整個(gè)網(wǎng)站上實(shí)施規(guī)范代碼。如果我們確實(shí)遇到問(wèn)題，可以在Google網(wǎng)站管理員工具中阻止該參數(shù)。

    7、復(fù)制路徑

    網(wǎng)站頁(yè)面上有重復(fù)的路徑是完全可以的，但是當(dāng)重復(fù)的路徑生成重復(fù)的URL時(shí)，就會(huì)出現(xiàn)問(wèn)題。在這里，可以通過(guò)類別欄目和一個(gè)用戶生成的標(biāo)簽來(lái)訪問(wèn)產(chǎn)品頁(yè)面。用戶生成的標(biāo)簽尤其成問(wèn)題，因?yàn)樗鼈冊(cè)诶碚撋峡梢援a(chǎn)生頁(yè)面的無(wú)限版本。我們則完全不應(yīng)創(chuàng)建這些基于路徑的URL。無(wú)論頁(yè)面被導(dǎo)航到哪個(gè)頁(yè)面，它僅應(yīng)具有一個(gè)用于SEO的URL。或許有朋友會(huì)說(shuō)，在URL中包含導(dǎo)航路徑對(duì)于站點(diǎn)用戶來(lái)說(shuō)是一個(gè)積極的提示，但是即使是具有可用性背景的人，我們認(rèn)為此處的缺點(diǎn)幾乎總是比缺點(diǎn)更重要。如果我們已經(jīng)為變體建立了索引，那么301重定向或規(guī)范標(biāo)記可能是我們的最佳選擇。在很多情況下，實(shí)現(xiàn)規(guī)范標(biāo)簽會(huì)更加容易，因?yàn)榭赡軙?huì)有太多的變化而無(wú)法輕松重定向。從長(zhǎng)遠(yuǎn)來(lái)看，我們需要重新評(píng)估我們的網(wǎng)站架構(gòu)。

    8、功能參數(shù)

    功能參數(shù)是URL參數(shù)，它們會(huì)稍微改變頁(yè)面，但沒(méi)有搜索價(jià)值，實(shí)際上是重復(fù)的。我們最好的選擇是根本不使用Meta Noindex之類的索引，但也可以使用規(guī)范標(biāo)記合并這些頁(yè)面。

    9、國(guó)際重復(fù)

    當(dāng)我們擁有共享同一語(yǔ)言的不同國(guó)家/地區(qū)的內(nèi)容時(shí)，這些重復(fù)項(xiàng)就會(huì)出現(xiàn)，所有內(nèi)容都托管在同一根域名當(dāng)然也可能是子文件夾或子域名中。這時(shí)候Google會(huì)很好地處理它，并在適當(dāng)?shù)膰?guó)家/地區(qū)對(duì)適當(dāng)?shù)膬?nèi)容進(jìn)行排名。在其他情況下，即使采用適當(dāng)?shù)牡乩砦恢枚ㄎ?，他們也不?huì)這樣做。定位語(yǔ)言本身通常要比針對(duì)國(guó)家/地區(qū)更好，但是出于合理的原因，可以將針對(duì)特定國(guó)家/地區(qū)的內(nèi)容分開(kāi)。如果我們的國(guó)際內(nèi)容確實(shí)被視為重復(fù)內(nèi)容，則沒(méi)有簡(jiǎn)單的答案。如果我們進(jìn)行301重定向，則會(huì)丟失用戶頁(yè)面。如果我們使用規(guī)范標(biāo)簽，則Google只會(huì)對(duì)頁(yè)面的一種版本進(jìn)行排名。正確的解決方案可能是非常情況的，并且實(shí)際上取決于風(fēng)險(xiǎn)與收益的權(quán)衡。

    10、搜索類別

    到目前為止，我們例舉的所有形式都是真實(shí)的存在于網(wǎng)絡(luò)的網(wǎng)站案例。筆者想介紹一些接近重復(fù)的示例，因?yàn)樵摳拍钣悬c(diǎn)模糊。內(nèi)部搜索引擎會(huì)彈出一些常見(jiàn)示例，這些示例往往會(huì)衍生出許多變體-可排序結(jié)果，過(guò)濾器和分頁(yè)結(jié)果是最常見(jiàn)的問(wèn)題。每當(dāng)排序創(chuàng)建單獨(dú)的URL時(shí)，都會(huì)彈出搜索排序重復(fù)項(xiàng)。盡管兩個(gè)排序的結(jié)果在技術(shù)上是不同的頁(yè)面，但它們不會(huì)為搜索索引增加任何附加值，并且包含相同的內(nèi)容，只是順序不同。在大多數(shù)情況下，最好是完全阻止可排序的版本，通常是在有該參數(shù)的網(wǎng)頁(yè)上選擇性地添加Meta Noindex。緊急情況下，我們可以在Google Webmaster Tools中阻止sort參數(shù)。

    11、搜索過(guò)濾器

    搜索過(guò)濾器用于縮小內(nèi)部搜索范圍可以是價(jià)格，顏色，功能等。過(guò)濾器在銷售各種產(chǎn)品的電子商務(wù)網(wǎng)站上非常普遍。在許多情況下，搜索過(guò)濾器網(wǎng)址看起來(lái)很像搜索排序,那么我們就不要索引過(guò)濾器。只要Google擁有明確的產(chǎn)品途徑，索引每個(gè)變體通常會(huì)弊大于利。

    12、搜索分頁(yè)

    頁(yè)面分頁(yè)是一個(gè)容易描述的問(wèn)題，并且是一個(gè)難以解決的難題。每次將內(nèi)部搜索結(jié)果分成單獨(dú)的頁(yè)面時(shí)，我們都具有分頁(yè)內(nèi)容。盡管結(jié)果本身有所不同，但頁(yè)面的許多重要功能標(biāo)題，元描述，標(biāo)題，副本，模板等都是相同的。此外，Google并不是搜索內(nèi)搜索的忠實(shí)擁護(hù)者。Google曾說(shuō)過(guò)讓他們對(duì)分頁(yè)進(jìn)行分類，可問(wèn)題是他們做得還不夠好。之后Google推出了Rel= Prev和Rel=Next，最初的數(shù)據(jù)表明這些標(biāo)簽有效，但是我們沒(méi)有太多數(shù)據(jù)來(lái)證實(shí)它的有效性。