首先，我們應該知道什么情況會產生重復內容?

1、 重復更新內容：這是網站編輯在上傳文章的過程中多次上傳同一篇文章所致，歸根到底是沒有寫重復標題驗證功能。

2、網站內容多為采集，這種網站內容重復會被當做采集站直接被百度處理掉，百度新的綠蘿算法就是專門打擊采集站點的。

3、列表翻頁和內容分頁：列表翻頁和內容分頁標題相同，也會被判定為相同內容。

4、 多處調用同一篇內容：動態地址偽靜態會產生兩個不同URL但內容相同的情況，同一級欄目互相調用文章也會產生這樣的情況。

5、網站的固定版塊出現次數太多，很多網站的右側總是固定放一些版塊或欄目，這些欄目的內容從來不進行更新，或者各個頁面的右側都是前篇一律的內容，就會造成頁面重復度高。

6、未設置404錯誤頁面，當我們刪除某一個頁面的時候，一定要用404狀態碼給予用戶和蜘蛛一定的提示，如果代碼設置錯誤，那么刪除的頁面在蜘蛛那里是假想存在的，由此一來就會多次收錄。

7、生成的RSS訂閱。關于RSS訂閱大家都很熟悉，對于一些大型新聞網站或是個人博客之類的網站都會利用RSS訂閱來生成個人站點的內容，然而這些個人站點的內容必然會被他人轉載，這就會造成原始源信息和其他網站內容造成重合，蜘蛛重復收錄也就成了可能。

其次，知道了網站重復內容的產生，那么我們應該如何正確處理重復內容呢？

1、減少采集內容的頻率，增加原創內容。

  這點很容易理解，世上沒有不勞而獲的東西，如果網站的發展要依靠采集的話，那么這個網站也就沒有了繼續生存下去的希望。對于網站內容多為采集或簡單偽原創的網站，建議增加原創文章的內容，寧可百度收錄少一些，也不要讓百度把之前收錄的文章吐出來。

2、網站固定欄目內容隨機展示

  可以根據正文的關鍵詞，隨機調用右側欄目的文章內容，讓每一個頁面都有不一樣的內容，避免大量頁面相似度高的情況出現。

3、減少無效或是重復的URL。

  在我們從網站開始的建設過程當中就盡可能的使URL統一，切勿使用動態頁面進行連接，因為就蜘蛛的角度想問題，它是不喜歡動態頁面的。

4、頁面設置獨立的Meta標簽

  關鍵詞、標簽、描述，每一個頁面都需要不同，可以采用手動修改，或者根據一定的規則設置。

5、減少無效內容之間的鏈接。

  很多時候我們會對之前的網站結構或是內容頁進行修改，無形中就會遺留下一部分被刪除的內容，對于這些東西大家要及時的清理，利用管理員工具去掉這些無效的鏈接，以免蜘蛛重復抓取，從而形成類似于狀態碼200的情況。

6、設置404頁面

告知用戶和搜索引擎某些頁面不存在了，防止搜索引擎收錄大量死鏈。