• 柴达木盆地生态保护与治理规划出台 欲提高生物多样性保护 2019-03-08
  • 争奇斗艳 洛阳牡丹进入盛花期  600多种牡丹迎春绽放 2019-03-05
  • 习近平主持上海合作组织青岛峰会小范围会谈 2019-02-27
  • 西南民族大学校领导班子调整 杨敏任党委书记 2019-02-02
  • 网友@数博会(十四):期待数博会带来新精彩新发展 2019-02-02
  • 智媒云图(Intell Vision):图书馆“书童” 2018-12-29
  • 的神话少了没人相信我,继续,希望你造出更多的神话来 2018-12-29
  • 淮北日报社党委书记、社长张士锋祝贺人民日报创刊70周年 2018-12-14
  • 拓云科技一站式互联网+优质服务供应商!专注网站建设服务十年!
    联系方式        
    咨询电话:13452107902    
    SEO NEWS

    江西合力泰怎么样:分享一下新手Robots.txt文件规范写法

    作者 :拓云科技时间 :2018-09-26点击 :

    群英会开奖走势图 www.pnqy.net 下面我分享一下自己博客的Robots文件,并简单的说一下作用。

    User-agent: *

    Disallow: /comments/feed/

    Disallow: /*/trackback

    Disallow: /wp-admin/

    Disallow: /wp-includes/

    Disallow: /wp-content/plugins/

    Disallow: /wp-content/themes/

    Disallow: /*?replytocom=

    Disallow: /*/comment-page-*

    Disallow: /?r=*

    Disallow: /?p=*

    Disallow: /page/

    Allow: /wp-content/uploads/

    Sitemap: //***.me/sitemap.xml

    Sitemap: //***.me/sitemap_baidu.xml

    上面的User-agent:*意思就是对所有的蜘蛛进行规则,Disallow想必大家英文稍微会一点的都懂。比如Disallow: /page/意思就是不要抓取/page下面的网页,以免造成降权。

    晚上见有童鞋将Disallow: /*?replytocom=和Disallow: /*/comment-page-*类似的写成Disallow: *?replytocom=以及Disallow:*/comment-page-*特意说明一下,在百度官方的说明中,Disallow的地址必须以/这个斜杠开头,不加这个虽然可以但是不符合标准。


    联系电话:13452107902

    拓云CMS2.0建站系统 为SEO而生!我要建站 And 我要推广

    1. 版权所有:重庆拓云科技有限公司 - { 技精于专,做于细;业成于勤,守于挚 }

    Copyright 2000-2018,群英会开奖走势图 www.pnqy.net,All rights reserved

  • 柴达木盆地生态保护与治理规划出台 欲提高生物多样性保护 2019-03-08
  • 争奇斗艳 洛阳牡丹进入盛花期  600多种牡丹迎春绽放 2019-03-05
  • 习近平主持上海合作组织青岛峰会小范围会谈 2019-02-27
  • 西南民族大学校领导班子调整 杨敏任党委书记 2019-02-02
  • 网友@数博会(十四):期待数博会带来新精彩新发展 2019-02-02
  • 智媒云图(Intell Vision):图书馆“书童” 2018-12-29
  • 的神话少了没人相信我,继续,希望你造出更多的神话来 2018-12-29
  • 淮北日报社党委书记、社长张士锋祝贺人民日报创刊70周年 2018-12-14