一般來(lái)說(shuō)，阻止搜索引擎收錄也有可能成為一個(gè)seo難題，盡可能讓搜索引擎抓取和數(shù)據(jù)庫(kù)索引更多內(nèi)容是SEO們經(jīng)常頭痛的一個(gè)問(wèn)題，并沒(méi)有收錄、數(shù)據(jù)庫(kù)索引就難以談排行。特別是在對(duì)做到一定范圍的平臺(tái)而言，使上海市seo的網(wǎng)址充足收錄就是一個(gè)頗讓人費(fèi)心的SEO技術(shù)性，當(dāng)頁(yè)面做到例如幾，不管網(wǎng)站結(jié)構(gòu)怎么設(shè)計(jì)、多么的提升，收錄都根本不可能，只有盡可能提升收錄率。
但有時(shí)如何阻止搜索引擎收錄也有可能變成一個(gè)問(wèn)題，網(wǎng)址不收錄近些年愈來(lái)愈變成SEO難題。必須阻止收錄的狀況如保密信息、復(fù)制內(nèi)容、廣告鏈接等。以往常見(jiàn)的阻止收錄方式包含密碼設(shè)置、把信息放到報(bào)表后邊、應(yīng)用JS/Ajax、應(yīng)用Flash等。
應(yīng)用Flash
Google幾年前就進(jìn)行試著抓取Flash具體內(nèi)容了，簡(jiǎn)單文字性具體內(nèi)容早已能抓取。Flash里邊的連接也可以被追蹤。
報(bào)表
Google搜索引擎蜘蛛也可以填寫(xiě)表格，也可以抓取POST要求頁(yè)面。這一早已能從日志中見(jiàn)到。
JS/Ajax
應(yīng)用JS連接一直以來(lái)被當(dāng)成不搜索引擎友善的方式，因而能夠阻止搜索引擎蜘蛛爬取，但兩三年前我便見(jiàn)到JS連接不可以阻止Google搜索引擎蜘蛛抓取，不但JS中產(chǎn)生的URL會(huì)被爬，簡(jiǎn)單JS還能被實(shí)行尋找大量URL。
上圖為：阻止搜索引擎收錄的緣故
前幾日有些人發(fā)覺(jué)許多seo優(yōu)化應(yīng)用的Facebook評(píng)論外掛中的評(píng)論被爬、被收錄，外掛自身就是一個(gè)AJAX。這是一個(gè)喜訊。我自己的一個(gè)實(shí)驗(yàn)電商網(wǎng)站商品評(píng)論作用就因?yàn)檫@個(gè)費(fèi)了很多想法，用Facebookcomments外掛益處大大的，實(shí)際什么好處之后有時(shí)長(zhǎng)再講，的情況便是評(píng)論是AJAX完成的，不可以被抓取，而商品評(píng)論被收錄是目標(biāo)之一(造成原創(chuàng)內(nèi)容)。我當(dāng)初想想大半天都沒(méi)有解決方案，只能先傻傻地既放上Facebookcomments外掛又開(kāi)啟加入購(gòu)物車自身的評(píng)論作用。現(xiàn)在好了，F(xiàn)acebookcomments中的評(píng)論能被收錄，就無(wú)需2套評(píng)論作用了。
Robots文件
現(xiàn)階段保證具體內(nèi)容不被收錄的方式是robots文件嚴(yán)禁。卻也有一個(gè)弊端，會(huì)減少權(quán)重值，盡管內(nèi)容是不可以收錄了，但頁(yè)面成了只接納連接權(quán)重值、不排出權(quán)重值的無(wú)底深潭。
Nofollow
Nofollow根本無(wú)法確保不被收錄。即使自身網(wǎng)址全部偏向頁(yè)面的連接都加了NF，也不要確保他人高企業(yè)網(wǎng)站建設(shè)不給這一頁(yè)面弄個(gè)連接，搜索引擎或是能看到這一頁(yè)面。
MetaNoindex+Follow
為避免收錄又能傳送權(quán)重值，能夠在頁(yè)面上使用metanoindex和metafollow，那樣頁(yè)面不收錄，但能排出權(quán)重值。的確這般，也就是一個(gè)比較好的方式。也有一個(gè)難題，依然會(huì)消耗搜索引擎蜘蛛爬取時(shí)長(zhǎng)。哪一位閱讀者可以避免收錄、又并沒(méi)有權(quán)重值外流、又不消耗爬取時(shí)長(zhǎng)的方式，請(qǐng)留言，對(duì)SEO界功德圓滿。
