網(wǎng)站文章需要每天都進行基本的維護和添加，但是文章添加過多了，就會出現(xiàn)網(wǎng)站文章相似度過高的現(xiàn)象，從長遠(yuǎn)角度來說，這對網(wǎng)站的優(yōu)化是十分不利的。后期搜索引擎蜘蛛會減少對網(wǎng)站的收錄。因此網(wǎng)站文章寫作需要有新意，才能有效的避免網(wǎng)站文章相似的問題。今天上海珍島SEO培訓(xùn)和大家探討的內(nèi)容就是重復(fù)內(nèi)容產(chǎn)生的原因以及解決方法。

1，網(wǎng)址規(guī)范化問題

網(wǎng)站的網(wǎng)址規(guī)范化，主要是指網(wǎng)站的主域名和頁面的URL地址。首先網(wǎng)站的主域名需要和網(wǎng)站產(chǎn)品緊密相連，這樣可以很好的吸引搜索引擎蜘蛛過來抓取。而頁面的UTL規(guī)范化，主要是指網(wǎng)站的頁面進行偽靜態(tài)頁面的處理。但是很多的情況下，一般的網(wǎng)站偽靜態(tài)之后，原始的動態(tài)URL依然存在并能夠訪問，這樣就造成了多個URL訪問相同網(wǎng)址。

2，內(nèi)容的其他版本

很多的站長對網(wǎng)站添加的文章，沒有很好的做到取舍。比如很多網(wǎng)站除了提供正常的版本之外還提供一些其它的瀏覽版本，比如打印版本或者簡版，卻并沒有禁止搜索引擎去抓取這些頁面，而這些頁面也因此變成了重復(fù)內(nèi)容頁面。網(wǎng)站頁面的重復(fù)自然是文章的添加不當(dāng)造成的，自然也會影響網(wǎng)站的正常收錄和更新。

3，網(wǎng)站結(jié)構(gòu)

網(wǎng)站除了對網(wǎng)站內(nèi)容進行基本的設(shè)置外，還需要對網(wǎng)站的結(jié)構(gòu)進行基本的設(shè)置。很多網(wǎng)站在結(jié)構(gòu)設(shè)計之初并沒考慮SEO方面的因素，結(jié)果是導(dǎo)致造成各種頁面版本，比如產(chǎn)品按價格，評論，時間排序等，特別是一些電子商務(wù)網(wǎng)站，這種頁面重復(fù)現(xiàn)象尤為嚴(yán)重。對網(wǎng)站的結(jié)構(gòu)可以做到規(guī)范化，這樣就會減少蜘蛛對不利優(yōu)化的頁面的抓取。

4，URL任意加字符還是返回200狀態(tài)碼

一些網(wǎng)站是因為網(wǎng)站程序和技術(shù)的原因，用戶在URL參數(shù)后面隨意加上一些字符都能夠正常訪問，并且頁面是和沒加之前的完全重復(fù)。檢查頁面是否有重復(fù)版本有一個比較簡單的方法，就是將內(nèi)容隨機選擇一句話加雙引號后進行搜索，從結(jié)果中就可以看到有多少個重復(fù)的頁面。因為通常來說隨機選一句話進行搜索完全生命的機率是比較小的。

如何消除復(fù)制內(nèi)容的方法

1，301重定向

301能夠傳遞頁面的權(quán)重，目前來說主流搜索引擎都支持301重定向，可以將復(fù)制內(nèi)容的頁面全部通過301永久重定向的方式跳轉(zhuǎn)到原版頁面。

2，robots文件禁止

通過在robots.txt文件中禁止復(fù)制內(nèi)容被搜索引擎抓取，也能有效的解決網(wǎng)址重復(fù)問題。這樣可以很好的解決網(wǎng)站蜘蛛對不利頁面的抓取。一般網(wǎng)站在上線之初，都會進行robots文件設(shè)置。這對網(wǎng)站后期的優(yōu)化也是非常好的。

3，canonical標(biāo)簽

canonical 標(biāo)簽可以為搜索引擎指明當(dāng)前頁面權(quán)重的側(cè)重點在于哪個鏈接，從而有助于 SEO。canonical標(biāo)簽是由谷歌，雅虎在2009年共同發(fā)布的一個新的標(biāo)簽，目前百度也表示支持canonical標(biāo)簽，這個標(biāo)簽也可以用于解決網(wǎng)址重復(fù)的問題。

添加了以上標(biāo)簽后，也就相當(dāng)于告訴搜索引擎哪個網(wǎng)址是最規(guī)范原創(chuàng)的版本，其它復(fù)制內(nèi)容都是指向這一個唯一的網(wǎng)址，有一點頁面301傳遞權(quán)重的意思，但是301是頁面直接跳轉(zhuǎn)，而加這個標(biāo)簽后，頁面還是停留在原始地址。