超碰中文字幕在线_女人18毛片水真多18精品_色综合久久六月婷婷中文字幕_免费的av网站_国产视频久久久_精品久久久久久久久久久久久久久 _欧美最猛性xxxxx亚洲精品_欧美人妻一区二区_欧美美女激情18p_一区二区三区视频在线播放_欧美a视频在线观看_一区免费观看视频

或者

怎樣減少無效URL的爬行和索引

作者:青檸i 瀏覽:136 發(fā)布時間:2018-05-19
分享 評論 0

    少年老成的云晨守望同學(題外話:少年老成是好事哈.我20多歲時人家說我像40歲,我40多歲時好多人說我像30多,男人20到50歲可以做到基本一個樣子)貼了個帖子:透過京東商城看國內一線B2C網(wǎng)站seo通病.建議先看那個帖子再回來看本帖,不然不容易明白下面在說什么.


    簡單說,帖子指出一個嚴重而且現(xiàn)實的seo問題:很多網(wǎng)站,尤其是B2C,產(chǎn)品條件過濾系統(tǒng)(如選擇產(chǎn)品的品牌、價格、尺寸、性能、參數(shù)等)會產(chǎn)生大量無效URL,之所以稱為無效只是從seo角度看的,這些URL并不能產(chǎn)生SEO作用,反倒有負面作用,所以這些URL不收錄為好,原因包括:


    1.大量過濾條件頁面內容重復或極為類似(大量復制內容將使網(wǎng)站整體質量下降)


    2.大量過濾條件頁面沒有對應產(chǎn)品,頁面無內容(如選擇"100元以下42寸LED電視"之類的)


    3.絕大部分過濾條件頁面沒有排名能力(排名能力比分類頁面低得多)卻浪費一定權重


    4.這些過濾條件頁面也不是產(chǎn)品頁面收錄的必要通道(產(chǎn)品頁面應該有其它內鏈幫助爬行和收錄)


    5.爬行大量過濾條件頁面極大浪費蜘蛛爬行時間,造成有用頁面收錄機會下降(過濾條件頁面組合起來是巨量的)


    那么怎樣盡量使這些URL不被爬行和索引、收錄呢?前幾天的一篇帖子如何隱藏內容也可能成為SEO問題討論的是類似問題,這種過濾頁面就是想隱藏的內容種類之一.不過可惜,我目前想不出完美的解決方法.云晨守望提出兩個方法,我覺得都無法完美解決.


    一是將不想收錄的URL保持為動態(tài)URL,甚至故意越動態(tài)越好,以阻止被爬行和收錄.但是,搜索引擎現(xiàn)在都能爬行、收錄動態(tài)URL,而且技術上越來越不是問題.雖然參數(shù)多到一定程度確實不利于收錄,但4、5個參數(shù)通常還可以收錄.我們無法確認需要多少參數(shù)才能阻止收錄,所以不能當作一個可靠的方法.而且這些URL接收內鏈,又沒有什么排名能力,還是會浪費一定權重.


    第二個方法,robots禁止收錄.同樣,URL接收了內鏈也就接收了權重,robots文件禁止爬行這些URL,所以接收的權重不能傳遞出去(搜索引擎不爬行就不知道有什么導出鏈接),頁面成為權重只進不出的黑洞.


    連向這些URL的鏈接配合nofollow也不完美,和robots禁止類似,nofollow在Google的效果是這些URL沒有接收權重,權重卻也沒有被分配到其它鏈接上,所以權重同樣浪費了.百度據(jù)稱支持nofollow,但權重怎么處理未知.


    將這些URL鏈接放在Flash、JS里也沒有用,搜索引擎已經(jīng)可以爬行Flash、JS里的鏈接,而且估計以后越來越擅長爬.很多SEO忽略了的一點是,JS中的鏈接不僅能被爬,也能傳遞權重,和正常連接一樣.


    也可以將過濾條件鏈接做成AJAX形式,用戶點擊后不會訪問一個新的URL,還是在原來URL上,URL后面加了#,不會被當成不同URL.和JS問題一樣,搜索引擎正在積極嘗試爬行、抓取AJAX里的內容,這個方法也不保險.


    還一個方法是在頁面head部分加noindex+follow標簽,意即本頁面不要索引,但跟蹤頁面上的鏈接.這樣可以解決復制內容問題,也解決了權重黑洞問題(權重是可以隨著導出鏈接傳到其它頁面的),不能解決的是浪費蜘蛛爬行時間問題,這些頁面還是要被蜘蛛爬行抓取的(然后才能看到頁面html里的noindex+follow標簽),對某些網(wǎng)站來說,過濾頁面數(shù)量巨大,爬行了這些頁面,蜘蛛就沒足夠時間爬有用頁面了.


    再一個可以考慮的方法是隱藏頁面(cloaking),也就是用程序檢測訪問者,是搜索引擎蜘蛛的話返回的頁面拿掉這些過濾條件鏈接,是用戶的話才返回正常的有過濾條件的頁面.這是一個比較理想的解決方法,唯一的問題是,可能被當作作弊.搜索引擎常跟SEO講的判斷是否作弊的最高原則是:如果沒有搜索引擎,你會不會這么做?或者說,某種方法是否只是為了搜索引擎而采用?顯然,用cloaking隱藏不想被爬行的URL是為搜索引擎做的,不是為用戶做的.雖然這種情況下的cloaking目的是美好的,沒有惡意的,但風險是存在的,膽大的可試用.


    還一個方法是使用canonical標簽,最大問題是百度是否支持未知,而且canonical標簽是對搜索引擎的建議,不是指令,也就是說這個標簽搜索引擎可能不遵守,等于沒用.另外,canonical標簽的本意是指定規(guī)范化網(wǎng)址,過濾條件頁面是否適用有些存疑,畢竟,這些頁面上的內容經(jīng)常是不同的.


    目前比較好的方法之一是iframe+robots禁止.將過濾部分代碼放進iframe,等于調用其它文件內容,對搜索引擎來說,這部分內容不屬于當前頁面,也即隱藏了內容.但不屬于當前頁面不等于不存在,搜索引擎是可以發(fā)現(xiàn)iframe中的內容和鏈接的,還是可能爬行這些URL,所以加robots禁止爬行.iframe中的內容還是會有一些權重流失,但因為iframe里的鏈接不是從當前頁面分流權重,而只是從調用的那個文件分流,所以權重流失是比較少的.除了排版、瀏覽器兼容性之類的頭疼問題,iframe方法的一個潛在問題是被認為作弊的風險.現(xiàn)在搜索引擎一般不認為iframe是作弊,很多廣告就是放在iframe中,但隱藏一堆鏈接和隱藏廣告有些微妙的區(qū)別.回到搜索引擎判斷作弊的總原則上,很難說這不是專門為搜索引擎做的.記得Matt Cutts說過,Google以后可能改變處理iframe的方式,他們還是希望在同一個頁面上看到普通用戶能看到的所有內容.


    總之,對這個現(xiàn)實、嚴重的問題,我目前沒有自己覺得完美的答案.當然,不能完美解決不是就不能活了,不同網(wǎng)站SEO重點不同,具體問題具體分析,采用上述方法中的一種或幾種應該可以解決主要問題.


    而最最最大的問題還不是上述這些,而是有時候你想讓這些過濾頁面被爬行和收錄,這才是杯具的開始.以后再討論.


日韩精品中午字幕| 91福利资源站| 亚洲女子a中天字幕| 国产精品国产三级国产aⅴ入口 | 欧美日韩国产在线观看| 精品久久久三级丝袜| 国产亚洲精品久久久| 久久91亚洲精品中文字幕| 欧美亚洲国产精品| 国产精品久久久久久免费观看 | 久久精品精品电影网| 久久久久久免费精品| 成人h视频在线观看播放| 鲁丝一区二区三区免费| 久久久久久久香蕉| 韩国视频一区二区三区| 中文字幕在线免费看线人| 久久久久久久久久久网| 国产丰满果冻videossex| 国产精品白丝av| 一区二区三区四区国产精品| 欧美二区三区91| 色狠狠久久aa北条麻妃| 国产欧美精品日韩| 亚洲一区二区三区免费观看| www.精品在线| 少妇人妻丰满做爰xxx| 99久久精品无免国产免费| 久久er99热精品一区二区| 亚洲少妇30p| 日韩手机在线导航| 欧美成人网在线| 99精品99久久久久久宅男| www.国产亚洲| 受虐m奴xxx在线观看| 无码人妻精品一区二区三区蜜桃91| 久久久一二三| 亚洲视频 欧洲视频| 日韩成人av网址| 成人国产精品免费视频| 国产免费观看高清视频| 欧美三级视频网站| 免费av网站在线播放| 国产精品家庭影院| 亚洲精品电影久久久| 91情侣偷在线精品国产| 白嫩少妇丰满一区二区| 久久久久久久久久一区二区三区| 麻豆国产精品官网| 色婷婷亚洲婷婷| 97国产精品人人爽人人做| 成年人黄色在线观看| 成人国产精品久久久网站| 性中国xxx极品hd| 国产精品久久久久婷婷二区次| 欧美成人精精品一区二区频| 国产精品偷伦一区二区 | 国产日韩精品一区二区| 老太脱裤子让老头玩xxxxx| 老司机深夜福利网站| 日韩精品一级中文字幕精品视频免费观看| 一区二区三区在线播| 日韩一区二区av| 五月天综合网| 国产传媒视频在线| 国产一区二区三区四区五区美女 | 美女精品一区| 国产欧美日韩在线视频| 国产亚洲精品va在线观看| 欧美一区二区综合| 日本xxx在线播放| 日本午夜精品视频在线观看 | 日韩福利电影在线| 欧美日韩一区二区三区四区五区 | 精品国产一区久久| 国产九色精品| 精品欧美一区二区久久久| 久久最新视频| 欧美一区二区大片| 国产不卡一区二区在线观看| 法国伦理少妇愉情| 国产精一区二区三区| 亚洲国产日韩欧美在线图片| 亚洲国产午夜伦理片大全在线观看网站 | 中文字幕a级片| 亚洲另类在线视频| 欧美资源在线观看| 自拍一级黄色片| 日韩av中文在线观看| 日韩午夜中文字幕| 色婷婷精品国产一区二区三区| 俄罗斯毛片基地| 久久影视一区二区| 久久91精品国产91久久久| 日韩精品一区二区三区色欲av| 国产精品高潮呻吟久久久| 色综合色狠狠天天综合色| av日韩免费电影| 日韩毛片无码永久免费看| 成人黄色777网| 最近的2019中文字幕免费一页| 日韩av高清在线看片| 国产极品久久久| 91精品国产黑色紧身裤美女| 亚洲精品一区二区三区四区五区| 圆产精品久久久久久久久久久| 夜夜嗨av一区二区三区| 91一区二区三区| 老女人性淫交视频| 亚洲精品乱码久久久久久久久| 国产一区二区在线免费视频| 国产一二三四五区| 国产精品电影院| 成人综合国产精品| 九九视频在线免费观看| 亚洲一级不卡视频| 日本一区二区三区免费观看| 中文字幕在线2018| 精品久久久久久久久久久院品网| 国产免费黄色一级片| 日本在线观看不卡视频| 草民午夜欧美限制a级福利片| 日本人dh亚洲人ⅹxx| 97精品国产97久久久久久久久久久久| 欧美日韩成人在线视频| 中文字幕天堂网| 国产欧美日韩在线| 国产精品xxxx| 国产污污视频在线观看| 色综合中文综合网| 黄色成人在线免费观看| 奇米777欧美一区二区| 欧美寡妇偷汉性猛交| 国产三级短视频| 亚洲aaa精品| 一区二区三区我不卡| 日韩性xxxx| 伦理中文字幕亚洲| 色欲狠狠躁天天躁无码中文字幕 | 日韩精品国产精品| 色综合视频网站| 黄色免费一级视频| 欧美中文字幕一区二区三区| 国产精品www在线观看| 国产在线看一区| 国产精品久久久av| 国产亚洲欧美在线精品| 精品视频久久久| av不卡中文字幕| 一区在线观看视频| 日本成人黄色| 免费看日韩精品| 国产成人极品视频| 国产精品熟女视频| 亚洲天堂第一页| 久久精品一区二区免费播放 | 免费毛片一区二区三区久久久| 国产黄色一级大片| 欧美在线性视频| 国产精品视频一区在线观看| 亚洲丝袜一区在线| 影音先锋男人看片资源| 日韩欧美在线观看一区二区三区| 日韩欧美色视频| 亚洲电影一区二区| 韩国日本在线视频| 亚洲欧美一区二区三区久本道91| 中文一区一区三区免费| 成人激情免费电影网址| 国产一区二区三区奇米久涩| 日韩影院精彩在线| 91精品视频免费观看| 91亚洲国产成人久久精品麻豆| 中文字幕亚洲综合久久| 老湿机69福利| 伊人久久久久久久久久久| 亚洲波多野结衣| 亚洲精品视频久久| 一区二区视频免费看| 日韩国产中文字幕| 免费在线观看一级片| 一区二区亚洲精品国产| 日本爱爱小视频| 亚洲人午夜色婷婷| 国产成人自拍视频在线| 欧美大片免费观看| 91tv国产成人福利| 国产精品偷伦免费视频观看的| 成人无码一区二区三区| 成人美女av在线直播| 久久国产免费| www.久久久| 福利一区在线观看| 伊人久久99| 国产精品美女久久久久久2018| 极品美女扒开粉嫩小泬| 亚洲一区国产视频| 波多野结衣中文字幕在线播放| 欧美日韩在线播放| 又嫩又硬又黄又爽的视频| 一区二区三区视频在线| 久久精品视频2| 国产精品高潮视频| 国产真实乱子伦精品视频| 亚洲日本无吗高清不卡| 亚洲欧洲三级电影| 图片区乱熟图片区亚洲| 精品欧美一区二区三区精品久久| 久久国产高清视频| 欧美精品久久一区二区| 五月婷婷免费视频| 色综合视频二区偷拍在线| 国产午夜精品一区二区三区嫩草| 男人天堂成人在线| 91精品国产高清一区二区三区蜜臀| 欧美激情图片小说| 欧美中文在线免费| 国产一区二区三区av电影 | 国产精品黄视频| 国产成人免费在线观看| 久久久久久久久久久99| 欧美三级三级三级爽爽爽| 国产伦精品一区二区三区视频女| 欧美国产日韩一区二区在线观看| 日本黄色免费视频| 在线免费观看一区二区三区| 亚洲制服欧美中文字幕中文字幕| 国产色视频一区二区三区qq号| 中文字幕在线看视频国产欧美在线看完整 | 一区高清视频| 欧美网站一区二区| 国产午夜久久久| 亚洲一区二区三区四区在线播放| 91免费看视频| 日本美女视频网站| 日韩中文字幕免费看| 久久深夜福利| www.av中文字幕| 欧美一区二区在线播放| 99成人精品视频| 日本高清一区| 在线观看www91| 亚洲日本视频在线观看| 久久av二区| 日本精品一区二区三区高清| 亚洲天堂日韩av| 国产伦理久久久| 天天操天天干天天综合网| 欧美日韩一级大片| 97se视频在线观看| 亚洲国产视频直播| 91在线看视频| 亚洲国产欧美日韩| 欧美成人精品福利| 色香蕉在线视频| 能在线观看的av网站| 久久人人爽亚洲精品天堂| 国产高清精品久久久久| 免费黄色a级片| 国产91九色视频| 国产精品不卡一区二区三区| av片在线免费看| 成人欧美一区二区三区在线观看 | 久久九九电影| 欧美日韩在线视频一区二区三区| 亚洲免费影视第一页| 国精产品一区一区三区mba视频| 91精品999| 欧美一级高清免费播放| 中文字幕在线观看不卡| 国产一级生活片| 亚洲bbw性色大片| 亚洲国产精品99| 国产尤物一区二区在线| 久久久午夜精品福利内容| 国产精品日韩在线播放| 岛国av一区二区| 精品国产va久久久久久久| 日本三级免费网站| 久久久久久久999| 综合电影一区二区三区| 波多野结衣一区二区三区在线| 成年人三级视频| 精品国产一区二区三区久久久狼| 久久这里只有精品6| 日本一区二区欧美| 婷婷无套内射影院| 欧美激情喷水视频| 一区二区三区精品在线| 一级成人免费视频| 亚洲精品第三页| 444亚洲人体| 精品国产伦一区二区三区观看方式| 久久99久久99小草精品免视看| 中文字幕日韩三级片| 精品乱码一区| 亚洲色在线视频| 国产精品久久综合| 91亚洲欧美激情| 久久久久亚洲av片无码v| 91久久久国产精品| 亚洲福利视频专区| 2021国产精品久久精品| caoporn国产| www.色欧美| 国产偷久久久精品专区| 亚洲片av在线| 亚洲精品视频在线看| 高潮一区二区三区乱码| 天天躁日日躁aaaxxⅹ| 超碰免费在线公开| 5566日本婷婷色中文字幕97| 91国偷自产一区二区三区观看| 久久成人免费电影| 日本在线小视频| 色国产在线视频| 国产精品免费视频一区二区| 亚洲欧美日韩精品久久亚洲区 | 国产日韩精品在线| 亚洲国产精品电影在线观看| 国产精品久久久一区麻豆最新章节| 国产精品久久久久久免费| 无码人妻精品一区二区三应用大全 | 六月婷婷七月丁香| 国产精品久久久久9999爆乳| 国产成一区二区| 日韩大片在线观看视频| 亚洲免费看黄网站| 首页亚洲欧美制服丝腿| 免费在线看黄网址| 五月六月丁香婷婷| 亚洲精品在线视频观看| 日韩av电影在线网| 亚洲欧美999| 色一情一伦一子一伦一区| 波多野结衣中文字幕一区 | 天堂www中文在线资源| 一本色道久久综合亚洲精品婷婷 | 亚洲黄色在线网站| 男女啪啪免费视频网站| 国产成人精品福利一区二区三区| 久久久97精品| 日韩一级免费观看| 亚洲激情五月婷婷| 国产一区二区视频在线播放| 国产精品久久777777换脸| 精品无码在线观看| 日韩av福利在线观看| 男女啪啪的视频| 成人欧美一区二区| 欧美一级在线播放| 中国人与牲禽动交精品| 91麻豆精品国产91久久久久久久久 | 久久精品电影网站| 欧美xxx久久| 精品久久久久久久久中文字幕| 91丨porny丨国产| 日本vs亚洲vs韩国一区三区二区 | 91精品国产91综合久久蜜臀| 亚洲视频免费观看| 成人免费观看视频| 久久男女视频| 99热这里只有精品9| 日本一本高清视频| 国产真实乱在线更新| 亚洲一区二区三区四区五区六区| caopor在线视频| 热99这里只有精品| 免费的一级黄色片| 先锋影音欧美| 久久亚洲综合网| 高清国产在线一区| 成人久久18免费网站图片| 国产91精品黑色丝袜高跟鞋| 免费不卡在线观看av| 伊人久久大香线蕉av一区二区| 亚洲国产私拍精品国模在线观看| 在线播放/欧美激情| 欧美在线免费播放| 色综合天天狠狠| 性感美女极品91精品| 1024成人网色www| 国产精品婷婷午夜在线观看| 91老司机福利 在线| 成人永久免费视频| 成人性生交大片免费看中文网站| 美女视频黄免费的久久 | 久久国产露脸精品国产| 日本黄色录像视频| 欧美极品jizzhd欧美18| 欧美黄色一级生活片| 熟女俱乐部一区二区| 伊人网在线视频观看| 中国1级黄色片| 麻豆天美蜜桃91| 久久9999久久免费精品国产| 国产一级二级毛片| 国产一级淫片a| 在线观看日本视频| 亚洲天堂自拍偷拍| 性做久久久久久久| 日韩高清在线一区| 国产91丝袜在线观看| 国产福利一区二区三区视频| 粉嫩一区二区三区性色av| eeuss影院一区二区三区 | 国产精品ⅴa在线观看h| 成人在线视频网| 欧美日韩在线高清| 91视频 - 88av|