久草中文在线观看_久久精品中文字幕一区_亚洲日本欧美日韩中文字幕_熟妇人妻无乱码中文字幕真矢织江

或者

怎樣減少無效URL的爬行和索引

作者:月光邊境 瀏覽:195 發布時間:2017-06-06
分享 評論 0

很多網站,尤其是B2C,產品條件過濾系統(如選擇產品的品牌、價格、尺寸、性能、參數等)會產生大量無效URL,之所以稱為無效只是從SEO角度看的,這些URL并不能產生SEO作用,反倒有負面作用,所以這些URL不收錄為好,原因包括:

  大量過濾條件頁面內容重復或極為類似(大量復制內容將使網站整體質量下降)

  大量過濾條件頁面沒有對應產品,頁面無內容(如選擇“100元以下42寸LED電視”之類的)

  絕大部分過濾條件頁面沒有排名能力(排名能力比分類頁面低得多)卻浪費一定權重

  這些過濾條件頁面也不是產品頁面收錄的必要通道(產品頁面應該有其它內鏈幫助爬行和收錄)

  爬行大量過濾條件頁面極大浪費蜘蛛爬行時間,造成有用頁面收錄機會下降(過濾條件頁面組合起來是巨量的)

  那么怎樣盡量使這些URL不被爬行和索引、收錄呢?前幾天的一篇帖子如何隱藏內容也可能成為SEO問題討論的是類似問題,這種過濾頁面就是想隱藏的內容種類之一。不過可惜,我目前想不出完美的解決方法。

  一是將不想收錄的URL保持為動態URL,甚至故意越動態越好,以阻止被爬行和收錄。但是,搜索引擎現在都能爬行、收錄動態URL,而且技術上越來越不是問題。雖然參數多到一定程度確實不利于收錄,但4、5個參數通常還可以收錄。我們無法確認需要多少參數才能阻止收錄,所以不能當作一個可靠的方法。而且這些URL接收內鏈,又沒有什么排名能力,還是會浪費一定權重。

  第二個方法,robots禁止收錄。同樣,URL接收了內鏈也就接收了權重,robots文件禁止爬行這些URL,所以接收的權重不能傳遞出去(搜索引擎不爬行就不知道有什么導出鏈接),頁面成為權重只進不出的黑洞。

  連向這些URL的鏈接配合nofollow也不完美,和robots禁止類似,nofollow在Google的效果是這些URL沒有接收權重,權重卻也沒有被分配到其它鏈接上,所以權重同樣浪費了。百度據稱支持nofollow,但權重怎么處理未知。

  也可以將過濾條件鏈接做成AJAX形式,用戶點擊后不會訪問一個新的URL,還是在原來URL上,URL后面加了#,不會被當成不同URL。和JS問題一樣,搜索引擎正在積極嘗試爬行、抓取AJAX里的內容,這個方法也不保險。

  還一個方法是在頁面head部分加noindex+follow標簽,意即本頁面不要索引,但跟蹤頁面上的鏈接。這樣可以解決復制內容問題,也解決了權重黑洞問題(權重是可以隨著導出鏈接傳到其它頁面的),不能解決的是浪費蜘蛛爬行時間問題,這些頁面還是要被蜘蛛爬行抓取的(然后才能看到頁面html里的noindex+follow標簽),對某些網站來說,過濾頁面數量巨大,爬行了這些頁面,蜘蛛就沒足夠時間爬有用頁面了。

  再一個可以考慮的方法是隱藏頁面(cloaking),也就是用程序檢測訪問者,是搜索引擎蜘蛛的話返回的頁面拿掉這些過濾條件鏈接,是用戶的話才返回正常的有過濾條件的頁面。這是一個比較理想的解決方法,唯一的問題是,可能被當作作弊。搜索引擎常跟SEO講的判斷是否作弊的最高原則是:如果沒有搜索引擎,你會不會這么做?或者說,某種方法是否只是為了搜索引擎而采用?顯然,用cloaking隱藏不想被爬行的URL是為搜索引擎做的,不是為用戶做的。雖然這種情況下的cloaking目的是美好的,沒有惡意的,但風險是存在的,膽大的可試用。

  還一個方法是使用canonical標簽,最大問題是百度是否支持未知,而且canonical標簽是對搜索引擎的建議,不是指令,也就是說這個標簽搜索引擎可能不遵守,等于沒用。另外,canonical標簽的本意是指定規范化網址,過濾條件頁面是否適用有些存疑,畢竟,這些頁面上的內容經常是不同的。

  目前比較好的方法之一是iframe+robots禁止。將過濾部分代碼放進iframe,等于調用其它文件內容,對搜索引擎來說,這部分內容不屬于當前頁面,也即隱藏了內容。但不屬于當前頁面不等于不存在,搜索引擎是可以發現iframe中的內容和鏈接的,還是可能爬行這些URL,所以加robots禁止爬行。iframe中的內容還是會有一些權重流失,但因為iframe里的鏈接不是從當前頁面分流權重,而只是從調用的那個文件分流,所以權重流失是比較少的。除了排版、瀏覽器兼容性之類的頭疼問題,iframe方法的一個潛在問題是被認為作弊的風險?,F在搜索引擎一般不認為iframe是作弊,很多廣告就是放在iframe中,但隱藏一堆鏈接和隱藏廣告有些微妙的區別?;氐剿阉饕媾袛嘧鞅椎目傇瓌t上,很難說這不是專門為搜索引擎做的。記得Matt Cutts說過,Google以后可能改變處理iframe的方式,他們還是希望在同一個頁面上看到普通用戶能看到的所有內容。

  總之,對這個現實、嚴重的問題,我目前沒有自己覺得完美的答案。當然,不能完美解決不是就不能活了,不同網站SEO重點不同,具體問題具體分析,采用上述方法中的一種或幾種應該可以解決主要問題。

  而最最最大的問題還不是上述這些,而是有時候你想讓這些過濾頁面被爬行和收錄,這才是杯具的開始。以后再討論。

久草中文在线观看_久久精品中文字幕一区_亚洲日本欧美日韩中文字幕_熟妇人妻无乱码中文字幕真矢织江
<code id="6mcsu"></code>
<li id="6mcsu"></li>
<li id="6mcsu"><dl id="6mcsu"></dl></li>
  • <code id="6mcsu"><tr id="6mcsu"></tr></code>
    色琪琪一区二区三区亚洲区| 日韩一区二区麻豆国产| 一区二区三区四区在线播放| 在线欧美小视频| 午夜精品福利一区二区蜜股av| 91精品在线观看入口| 国产在线观看免费一区| 国产精品美女久久久久久久网站| 91免费观看国产| 午夜欧美电影在线观看| 精品久久久久一区二区国产| 成人福利视频在线| 亚洲精品乱码久久久久久黑人| 欧美日韩国产a| 极品少妇一区二区三区精品视频 | 激情综合色播激情啊| 中文av一区特黄| 91国产视频在线观看| 免费成人在线网站| 国产精品狼人久久影院观看方式| 在线观看www91| 久久66热偷产精品| 最新日韩av在线| 91精品欧美福利在线观看| 国产精品18久久久久| 一区二区三区日韩精品| 欧美哺乳videos| 成人免费毛片高清视频| 三级久久三级久久| 国产欧美久久久精品影院| 欧美在线视频日韩| 国产酒店精品激情| 亚洲综合999| 久久久精品国产99久久精品芒果| 色悠悠久久综合| 国产一区二区三区久久悠悠色av| 亚洲免费毛片网站| 精品国产乱码久久久久久图片 | 欧美一级爆毛片| 成人avav在线| 日本不卡视频一二三区| 国产精品高潮呻吟| 精品久久久久久最新网址| 一本色道久久综合亚洲91| 韩国成人在线视频| 亚洲777理论| 国产精品毛片无遮挡高清| 日韩一区二区三区视频在线观看| av电影一区二区| 黑人巨大精品欧美一区| 亚洲永久免费av| 亚洲国产精品v| 日韩欧美自拍偷拍| 欧美亚洲高清一区| 成人性色生活片免费看爆迷你毛片| 日本中文字幕不卡| 尤物在线观看一区| 国产精品毛片a∨一区二区三区| 日韩亚洲欧美在线| 91久久精品一区二区三| 国产成人欧美日韩在线电影| 麻豆91精品视频| 午夜精品爽啪视频| 亚洲精品高清在线观看| 中文字幕电影一区| 精品国产乱码久久久久久老虎| 欧美日韩在线不卡| 91在线观看免费视频| 国产电影精品久久禁18| 久久精品国产99久久6| 亚洲电影视频在线| 亚洲私人影院在线观看| 国产欧美日韩在线视频| 精品国产三级a在线观看| 91精品国产综合久久香蕉的特点 | 4438x成人网最大色成网站| 91亚洲国产成人精品一区二三| 国产成人aaa| 国内精品久久久久影院色| 日韩在线一二三区| 亚洲成人一区二区在线观看| 亚洲人成在线播放网站岛国 | 久久99精品国产| 视频一区在线播放| 亚洲韩国一区二区三区| 一区二区三区丝袜| 亚洲精品午夜久久久| 成人欧美一区二区三区视频网页| 国产精品你懂的在线欣赏| 久久久久88色偷偷免费| 久久综合五月天婷婷伊人| 精品蜜桃在线看| 欧美成人免费网站| 精品久久久三级丝袜| 欧美白人最猛性xxxxx69交| 欧美精选一区二区| 91精品国产色综合久久久蜜香臀| 在线91免费看| 欧美一区二区三区免费在线看| 欧美一区二区久久| 欧美成人精品二区三区99精品| 日韩精品一区二区三区视频在线观看| 欧美一区在线视频| 精品久久久久久最新网址| 久久综合五月天婷婷伊人| 久久免费看少妇高潮| 国产欧美综合色| 中文字幕av一区二区三区免费看| 欧美激情一区不卡| 中文字幕在线视频一区| 18欧美亚洲精品| 一区二区免费视频| 婷婷亚洲久悠悠色悠在线播放| 日本视频在线一区| 狠狠色丁香婷婷综合久久片| 国产精品一区二区果冻传媒| 不卡高清视频专区| 色综合中文字幕| 欧美日韩电影一区| 欧美一区二区福利在线| 久久―日本道色综合久久 | 欧美激情中文字幕| 亚洲视频在线一区观看| 亚洲综合免费观看高清完整版 | 亚洲精品一区二区精华| 国产免费成人在线视频| 亚洲色图欧洲色图婷婷| 婷婷六月综合亚洲| 久草热8精品视频在线观看| 国产成人av一区二区三区在线| zzijzzij亚洲日本少妇熟睡| 欧美亚洲国产一区二区三区| 日韩一区二区在线免费观看| 国产色婷婷亚洲99精品小说| 亚洲免费在线电影| 日韩**一区毛片| 国产白丝网站精品污在线入口| 一本大道久久精品懂色aⅴ| 7777精品伊人久久久大香线蕉超级流畅| 日韩欧美三级在线| 中文字幕av资源一区| 亚洲韩国精品一区| 国产一区二三区好的| 色综合天天综合给合国产| 91精品国产综合久久久久久久久久| 26uuu国产电影一区二区| 亚洲视频图片小说| 日本亚洲天堂网| 成人免费视频国产在线观看| 欧美性xxxxxxxx| xfplay精品久久| 亚洲免费在线播放| 激情欧美一区二区三区在线观看| 成人精品小蝌蚪| 欧美丰满一区二区免费视频| 欧美激情一区二区三区在线| 亚欧色一区w666天堂| 国产精品1区2区| 欧美三日本三级三级在线播放| 2017欧美狠狠色| 亚洲一区二区综合| 国产精品 日产精品 欧美精品| 欧美亚洲国产一区二区三区| 国产日韩av一区| 五月激情综合婷婷| 不卡高清视频专区| 日韩欧美在线123| 亚洲卡通欧美制服中文| 精品一区二区三区影院在线午夜| 91麻豆福利精品推荐| 欧美精品一区视频| 亚洲成a人v欧美综合天堂 | 在线播放日韩导航| 国产精品久久久久久福利一牛影视 | 麻豆久久一区二区| 色吧成人激情小说| 久久精品夜色噜噜亚洲aⅴ| 亚洲va欧美va人人爽| av在线不卡网| 亚洲精品一区二区三区蜜桃下载| 亚洲一区在线观看免费观看电影高清 | 欧美男男青年gay1069videost | 久久久不卡网国产精品二区| 五月天激情小说综合| 99久久精品免费观看| www国产精品av| 日本亚洲一区二区| 欧美在线视频不卡| 中文字幕一区在线| 国产精品一区二区在线播放| 91精品国产综合久久久久久漫画 | 99视频一区二区| 久久久久国产精品麻豆| 强制捆绑调教一区二区| 91成人免费在线视频| 国产精品高潮久久久久无| 精品夜夜嗨av一区二区三区| 91精品国产一区二区三区蜜臀 | 国产aⅴ综合色| 亚洲精品一区在线观看|