<code id="6mcsu"></code>
<li id="6mcsu"></li>
<li id="6mcsu"><dl id="6mcsu"></dl></li>
  • <code id="6mcsu"><tr id="6mcsu"></tr></code>
    或者

    蜘蛛抓取不同的IP是什么意思

    作者:花開無聲 瀏覽:147 發(fā)布時(shí)間:2017-07-18
    分享 評論 0

      我們做網(wǎng)站的都知道互聯(lián)網(wǎng)上的頁面都是由蜘蛛抓取的,其實(shí)蜘蛛本身就是一段代碼程序,當(dāng)互聯(lián)網(wǎng)出 現(xiàn)新頁面時(shí)蜘蛛就會(huì)過來爬。由于互聯(lián)網(wǎng)每天將產(chǎn)生幾千億個(gè)頁面,那么一個(gè)蜘蛛是絕對無法在短時(shí)間內(nèi)爬完的,所以搜索引擎會(huì)產(chǎn)生大量的蜘蛛盡可能的爬完整個(gè) 互聯(lián)網(wǎng)。每個(gè)蜘蛛代表的意義又不同,那么我們怎么知道哪些蜘蛛是抓取首頁,哪些是抓取內(nèi)頁呢?

      合肥SEO撰寫這邊文章僅供參考讓大家對IIS日記各引擎的蜘蛛IP有個(gè)更深的了解,根據(jù)不同的IP我們可以分析網(wǎng)站是個(gè)怎樣的狀態(tài).下面就按照IIS日記上的百度蜘蛛IP為例:

      下面就按照IIS日記上的百度蜘蛛IP為例:

      123.125.68.* 這個(gè)蜘蛛經(jīng)常來,別的來的少,表示網(wǎng)站可能要進(jìn)入沙盒了,或被者降權(quán)。

      220.181.68.* 每天這個(gè)IP 段只增不減很有可能進(jìn)沙盒或K站。

      220.181.7.*、123.125.66.* 代表百度蜘蛛IP造訪,準(zhǔn)備抓取你東西。

      121.14.89.* 這個(gè)ip段作為度過新站考察期。

      203.208.60.* 這個(gè)ip段出現(xiàn)在新站及站點(diǎn)有不正常現(xiàn)象后。

      210.72.225.* 這個(gè)ip段不間斷巡邏各站。

      125.90.88.* 廣東茂名市電信也屬于百度蜘蛛IP 主要造成成分,是新上線站較多,還有使用過站長seo工具,或SEO技術(shù)綜合檢測造成的。

      220.181.108.95 這個(gè)是百度抓取首頁的專用IP,如是220.181.108段的話,基本來說你的網(wǎng)站會(huì)天天隔夜快照,絕對錯(cuò)不了的,我保證。

      220.181.108.92 同上98%抓取首頁,可能還會(huì)抓取其他 (不是指內(nèi)頁)220.181段屬于權(quán)重IP段此段爬過的文章或首頁基本24小時(shí)放出來。

      123.125.71.106 抓取內(nèi)頁收錄的,權(quán)重較低,爬過此段的內(nèi)頁文章不會(huì)很快放出來,因不是原創(chuàng)或采集文章。

      220.181.108.91 屬于綜合的,主要抓取首頁和內(nèi)頁或其他,屬于權(quán)重IP 段,爬過的文章或首頁基本24小時(shí)放出來。

      220.181.108.75 重點(diǎn)抓取更新文章的內(nèi)頁達(dá)到90%,8%抓取首頁,2%其他。權(quán)重IP 段,爬過的文章或首頁基本24小時(shí)放出來。

      220.181.108.86 專用抓取首頁IP 權(quán)重段,一般返回代碼是304 0 0 代表未更新。

      123.125.71.95 抓取內(nèi)頁收錄的,權(quán)重較低,爬過此段的內(nèi)頁文章不會(huì)很快放出來,因不是原創(chuàng)或采集文章。

      123.125.71.97 抓取內(nèi)頁收錄的,權(quán)重較低,爬過此段的內(nèi)頁文章不會(huì)很快放出來,因不是原創(chuàng)或采集文章。

      220.181.108.89 專用抓取首頁IP 權(quán)重段,一般返回代碼是304 0 0 代表未更新。

      220.181.108.94 專用抓取首頁IP 權(quán)重段,一般返回代碼是304 0 0 代表未更新。

      220.181.108.97 專用抓取首頁IP 權(quán)重段,一般返回代碼是304 0 0 代表未更新。

      220.181.108.80 專用抓取首頁IP 權(quán)重段,一般返回代碼是304 0 0 代表未更新。

      220.181.108.77 專用抓首頁IP 權(quán)重段,一般返回代碼是304 0 0 代表未更新。

      123.125.71.117 抓取內(nèi)頁收錄的,權(quán)重較低,爬過此段的內(nèi)頁文章不會(huì)很快放出來,因不是原創(chuàng)或采集文章。

      注:以上IP尾數(shù)還有很多,但段位一樣的123.125.71.* 段IP 代表抓取內(nèi)頁收錄的權(quán)重比較低.可能由于你采集文章或拼文章暫時(shí)被收錄但不放出來.(意思也就是說待定)。

      220.181.108.83專用抓取首頁IP 權(quán)重段,一般返回代碼是304 0 0 代表未更新。

      220.181.108.* 段IP主要是抓取首頁占80%,內(nèi)頁占30%,這此爬過的文章或首頁,絕對24小時(shí)內(nèi)放出來和隔夜快照的,這點(diǎn)我可以保證!

      一般成功抓取返回代碼都200,返回304代表網(wǎng)站沒更新。

      好了,說了這么多,是不是看的眼花繚亂了,呵呵,不過沒關(guān)系,只要你了解了他的意思,你就不會(huì)這么覺得了,每天可以用日志分析工具看看哪些ip段的蜘蛛來過你的網(wǎng)站,哪些內(nèi)容被抓取了,就能很好的了解你自己網(wǎng)站的哪些不足和需要改進(jìn)的地方了。


    亚洲精品无码专区2| 免费A级毛片无码A∨中文字幕下载 | 亚洲第一中文字幕| 国产办公室秘书无码精品99| 日韩精品无码免费专区午夜| 欧美日韩亚洲中文字幕一区二区三区| 无码少妇一区二区| 日韩精品无码一区二区视频| 久久亚洲中文字幕精品有坂深雪| 人妻无码一区二区三区AV| 最近中文字幕免费完整| 亚洲欧美综合在线中文| yy111111少妇影院里无码| 伊人久久综合精品无码AV专区 | 狠狠躁天天躁无码中文字幕 | 无码孕妇孕交在线观看| 中文无码熟妇人妻AV在线 | 日韩中文字幕一区| 中文有无人妻vs无码人妻激烈| 精品国产一区二区三区无码| 无码人妻精品一区二区三区66 | 免费看又黄又无码的网站| 伊人久久精品无码二区麻豆| 熟妇人妻中文av无码| 爆操夜夜操天天操狠操中文| 色婷婷久久综合中文久久蜜桃av| 无码精品人妻一区二区三区AV| 69天堂人成无码麻豆免费视频| 精品久久久久久无码专区不卡 | 国产在线拍偷自揄拍无码| 一本大道香蕉中文在线高清 | 中文字幕无码不卡免费视频| 久久精品无码一区二区app| 特级小箩利无码毛片| 亚洲乱亚洲乱少妇无码| 中文字幕久精品免费视频| 超清中文乱码字幕在线观看| 日韩乱码人妻无码中文字幕久久 | 欧美一级一区二区中文字幕| 亚洲久本草在线中文字幕| 日韩久久久久中文字幕人妻|