合肥市高新區(qū)長江西路與科學(xué)大道交口5F創(chuàng)業(yè)園A座309
136 5560 1775

新浪博客更新robot文件,新浪博客又可以成為外鏈寶地了

發(fā)表日期:2010-08-21 瀏覽次數(shù):2258次

前幾日網(wǎng)上討論最多的話題就是新浪博客屏蔽了百度蜘蛛的爬行,以后我們做網(wǎng)站優(yōu)化要如何來做,等等這一方面的問題我們合肥網(wǎng)站建設(shè)那天也寫了一篇http://rlfp.cn/news/12/774.html這樣的文章。

  開放百度的搜索引擎的User-Agent代碼

  User-agent: Baiduspider

  #限制不能搜索的目錄,Disallow: 為空時(shí)開放所有目錄####

  Disallow: /admin/

  Disallow: /include/

  Disallow: /html/

  Disallow: /queue/

  Disallow: /config/

  #開放bing.com的搜索引擎的User-Agent代碼

  User-agent: msnbot

  #限制不能搜索的目錄,Disallow: 為空時(shí)開放所有目錄####

  Disallow: /admin/

  Disallow: /include/

  Disallow: /html/

  Disallow: /queue/

  Disallow: /config/

  User-agent: bing

  #限制不能搜索的目錄,Disallow: 為空時(shí)開放所有目錄####

  Disallow: /admin/

  Disallow: /include/

  Disallow: /html/

  Disallow: /queue/

  Disallow: /config/

  #限制的搜索引擎的User-Agent代碼,*表示所有###########

  User-agent: *

  #臨時(shí)限制對(duì)所有目錄的禁止抓取

  Disallow: /

  #限制不能搜索的目錄,Disallow: 為空時(shí)開放所有目錄####

  ##Disallow: /admin/

  ##Disallow: /include/

  ##Disallow: /html/

  ##Disallow: /queue/

  ##Disallow: /config/

  #開放搜索的目錄有####################################

  # /

  # /advice/

  # /help/

  # /lm/

  # /main/

  # /myblog/

  可以看出新修改的robots.txt文件中的寫法已經(jīng)完全支持各類主流搜索引擎抓取博客內(nèi)容,一個(gè)開放的新浪博客又回來了!

 昨?yàn)橐粋€(gè)站長,我們現(xiàn)在又可以在新浪博客上寫一些自己文章,發(fā)外鏈了。對(duì)站長朋友也說也是一件很好的事情。


將文章分享到:

版權(quán)所有:啟邁科技-合肥網(wǎng)站建設(shè) 皖I(lǐng)CP備19009304號(hào)-1 皖公網(wǎng)安備 34010402702162號(hào)

網(wǎng)站建設(shè),網(wǎng)站設(shè)計(jì)公司啟邁科技,為眾多企業(yè)提供網(wǎng)站建設(shè),網(wǎng)站制作,響應(yīng)式網(wǎng)站設(shè)計(jì),手機(jī)網(wǎng)站建設(shè),微網(wǎng)站,模板建站,企業(yè)郵箱等一站式互聯(lián)網(wǎng)解決方案和建站服務(wù)10年。