一般來說，阻止搜索引擎收錄也可能成為一個SEO問題，盡量讓搜索引擎抓取和索引更多內容是SEO們經(jīng)常頭疼的一個問題，沒有收錄、索引就無從談排名。尤其對達到一定規(guī)模的網(wǎng)站來說，使上海seo的網(wǎng)站充分收錄是個頗令人費神的seo技術，當頁面達到比如說幾，無論網(wǎng)站架構怎么設計、多么優(yōu)化，收錄都是不可能的，只能盡量提高收錄率。
但有時候怎么阻止搜索引擎收錄也可能成為一個問題，網(wǎng)站不收錄近幾年越來越成為SEO問題。需要阻止收錄的情況如保密信息、復制內容、廣告鏈接等。過去常用的阻止收錄方法包括密碼保護、把內容放在表格后面、使用JS/Ajax、使用Flash等。
使用Flash
Google幾年前就開始嘗試抓取Flash內容了，簡單文字性內容已經(jīng)能抓取。Flash里面的鏈接也能被跟蹤。
表格
Google蜘蛛也能填表，也能抓取POST請求頁面。這個早就能從日志中看到。
JS/Ajax
使用JS鏈接一直以來被當作不搜索引擎友好的方法，因此可以阻止蜘蛛爬行，但兩三年前我就看到JS鏈接不能阻止Google蜘蛛抓取，不僅JS中出現(xiàn)的URL會被爬，簡單的JS還能被執(zhí)行找到更多URL。
上圖為：阻止搜索引擎收錄的原因
前幾天有人發(fā)現(xiàn)很多網(wǎng)站優(yōu)化使用的Facebook評論插件里的評論被爬、被收錄，插件本身是個AJAX。這是個好消息。我的一個實驗電子商務網(wǎng)站產品評論功能就因為這個費了不少心思，用Facebookcomments插件好處大大的，具體什么好處以后有時間再說，的問題就是評論是AJAX實現(xiàn)的，不能被抓取，而產品評論被收錄是目的之一(產生原創(chuàng)內容)。我當時想了半天也沒有解決方法，只好先傻傻地既放上Facebookcomments插件又打開購物車本身的評論功能?，F(xiàn)在好了，F(xiàn)acebookcomments里的評論能被收錄，就不用兩套評論功能了。
Robots文件
目前確保內容不被收錄的方法是robots文件禁止。但也有個壞處，會流失權重，雖然內容是不能收錄了，但頁面成了只接受鏈接權重、不流出權重的無底洞。
Nofollow
Nofollow并不能保證不被收錄。就算自己網(wǎng)站所有指向頁面的鏈接都加了NF，也不能保證別人高等網(wǎng)站建設不給這個頁面弄個鏈接，搜索引擎還是能發(fā)現(xiàn)這個頁面。
MetaNoindex+Follow
為防止收錄又能傳遞權重，可以在頁面上使用metanoindex和metafollow，這樣頁面不收錄，但能流出權重。確實如此，也是個比較好的方法。也有一個問題，還是會浪費蜘蛛爬行時間。哪位讀者有能防止收錄、又沒有權重流失、又不浪費爬行時間的方法，請留言，對SEO界功德無量。
（學習黑帽SEO技術,網(wǎng)站快速排名,蜘蛛池加速收錄）掃一下添加微信：
黑帽WiKi_黑帽百科(m.790079.com),8年黑帽SEO優(yōu)化技術,黑帽seo快速排名,黑帽seo技術培訓學習,黑帽SEO快速排名程序、泛目錄、寄生蟲技術,贈送免費黑帽SEO視頻教程
（黑帽SEO技術,網(wǎng)站快速排名,蜘蛛池加速收錄,目錄程序定制）
掃一下添加微信：
