• LADY咔咔(32)启辰T90征服龟毛处女座 2019-06-19
  • 民俗专家谈端午与新疆渊源 2019-06-13
  • 朝中社:朝俄就实现最高领导人会晤达成共识 2019-06-08
  • 九寨沟风景区天气,九寨沟风景区天气预报,九寨沟风景区天气预报一周 2019-06-08
  • 亮相《嗨,唱起来!》  萧敬腾回忆驻唱时光 2019-06-02
  • “网络兼职”涉嫌违法 刷单造假诱导消费属于不正当竞争 2019-06-01
  • 回复@大雨582:咱就是自由而全面发展的人啊! 2019-06-01
  • 回复@遇得:难道你认为他们没有深入领会 2019-05-26
  • 发红包违纪,窜连违法,你说咋办吧? 2019-05-25
  • “旺角骚乱案”10名被告暴动罪全部成立 最年轻者判刑超过4年 2019-05-25
  • 网友给四川省委书记、省长留言获回复 共计86条 2019-05-25
  • 评论员观察:70年正青春,不停步向未来 2019-05-25
  • 光大云缴费服务项目突破2500项 2019-05-21
  • 军刀已出鞘 今夏胜负见分晓 2019-05-21
  • 俞正声:坚持党的领导是人民政协须恪守的根本政治原则 2019-05-20
  • 拓云科技一站式互联网+优质服务供应商!专注网站建设服务十年!
    联系方式        
    咨询电话:13452107902    
    SEO NEWS

    时时彩9.9倍网址:分享一下新手Robots.txt文件规范写法

    作者 :拓云科技时间 :2018-09-26点击 :

    群英会开奖走势图 www.pnqy.net 下面我分享一下自己博客的Robots文件,并简单的说一下作用。

    User-agent: *

    Disallow: /comments/feed/

    Disallow: /*/trackback

    Disallow: /wp-admin/

    Disallow: /wp-includes/

    Disallow: /wp-content/plugins/

    Disallow: /wp-content/themes/

    Disallow: /*?replytocom=

    Disallow: /*/comment-page-*

    Disallow: /?r=*

    Disallow: /?p=*

    Disallow: /page/

    Allow: /wp-content/uploads/

    Sitemap: //***.me/sitemap.xml

    Sitemap: //***.me/sitemap_baidu.xml

    上面的User-agent:*意思就是对所有的蜘蛛进行规则,Disallow想必大家英文稍微会一点的都懂。比如Disallow: /page/意思就是不要抓取/page下面的网页,以免造成降权。

    晚上见有童鞋将Disallow: /*?replytocom=和Disallow: /*/comment-page-*类似的写成Disallow: *?replytocom=以及Disallow:*/comment-page-*特意说明一下,在百度官方的说明中,Disallow的地址必须以/这个斜杠开头,不加这个虽然可以但是不符合标准。


    联系电话:13452107902

    拓云CMS2.0建站系统 为SEO而生!我要建站 And 我要推广

    1. 版权所有:重庆拓云科技有限公司 - { 技精于专,做于细;业成于勤,守于挚 }

    Copyright 2000-2018,群英会开奖走势图 www.pnqy.net,All rights reserved

  • LADY咔咔(32)启辰T90征服龟毛处女座 2019-06-19
  • 民俗专家谈端午与新疆渊源 2019-06-13
  • 朝中社:朝俄就实现最高领导人会晤达成共识 2019-06-08
  • 九寨沟风景区天气,九寨沟风景区天气预报,九寨沟风景区天气预报一周 2019-06-08
  • 亮相《嗨,唱起来!》  萧敬腾回忆驻唱时光 2019-06-02
  • “网络兼职”涉嫌违法 刷单造假诱导消费属于不正当竞争 2019-06-01
  • 回复@大雨582:咱就是自由而全面发展的人啊! 2019-06-01
  • 回复@遇得:难道你认为他们没有深入领会 2019-05-26
  • 发红包违纪,窜连违法,你说咋办吧? 2019-05-25
  • “旺角骚乱案”10名被告暴动罪全部成立 最年轻者判刑超过4年 2019-05-25
  • 网友给四川省委书记、省长留言获回复 共计86条 2019-05-25
  • 评论员观察:70年正青春,不停步向未来 2019-05-25
  • 光大云缴费服务项目突破2500项 2019-05-21
  • 军刀已出鞘 今夏胜负见分晓 2019-05-21
  • 俞正声:坚持党的领导是人民政协须恪守的根本政治原则 2019-05-20
  • 江西快3平台世界十大 超级大乐透开奖时间 快乐12复式的投注方法 11选5彩票走势图 nba2k18官网下载 云南快乐时时彩今天 双色球历史的红球全小号组合 浙江快乐彩任选五玩法 腾讯分分彩官网走势图 北京pk10开奖号码 六合彩网站 吉林十一选五开奖查询 平特论坛三肖中特 pc蛋蛋对号投注 唐龙说彩软件下载