最新公告
  • 欢迎您光临云创源码,本站秉承服务宗旨 履行“站长”责任,销售只是起点 服务永无止境!立即加入我们
  • WordPress博客Robots.txt的写法

    正文概述 云码哥   2019-12-30   217

    今天,根据优化规则,参考了别人的WordPress博客robots.txt写法写了自己的Robots.txt:

    User-agent: *
    Disallow: /wp-admin
    Disallow: /wp-content/plugins
    Disallow: /wp-content/themes
    Disallow: /wp-includes
    Disallow: /?s=
    Disallow: /page/
    Disallow: /category/*/page/*
    Disallow: /tag/
    Disallow: */trackback/
    Disallow: /category/*
    Sitemap: http://www.zreading.cn/sitemap.xml

    方法如下:

    使用Wordpress搭建的博客,利用robots.txt文件限制搜索引擎抓取部分目录及文件,归纳大致有以下几种方法。

    最简单的开放写法

    不作任何限制,Wordpress站内链接结构比较合理,作为一般博客,完全开放就可以了,代码:

    User-agent: *
    Disallow:

    允许所有蜘蛛访问,允许访问所有内容。Wordpress只要模板中链接设计合理,没有需要限制的特殊内容,推荐使用这种写法。

    最简单的严格写法

    User-agent: *
    Disallow: /wp-*
    #Allow: /wp-content/uploads/
    Disallow: /*.php$
    Disallow: /*.inc$
    Disallow: /*.js$
    Disallow: /*.css$
    Disallow: /?s=

    允许所有蜘蛛访问,限制以“wp-”开头的目录及文件,限制抓取.php文件、.inc文件、.js文件、.css文件,限制抓取搜索结果。

    Disallow: /wp-* 会连同附件目录一起限制抓取,如果想让搜索引擎抓取附件中的内容,将第三行的 # 号注释去掉。Allow 不是所有搜索引擎都支持。

    最合理的写法

    卖瓜的都说自己瓜甜,我也觉得自己的Robots.txt写的最合理 WordPress博客Robots.txt的写法

    User-agent: *
    Disallow: /wp-admin
    Disallow: /wp-content/plugins
    Disallow: /wp-content/themes
    Disallow: /wp-includes
    Disallow: /?s=
    Sitemap: http://www.lesishu.cn/sitemap.xml

    允许所有搜索引擎抓取,逐一列举需要限制的目录,限制抓取搜索结果。

    包含sitemap.xml地址(这一项viki中有专门的说明,但Google管理员工具会提示‘检测到无效的 Sitemap 引用’,有效性尚有争议)。

    robots.txt其他写法

    为避免在搜索引擎中出现重复页面,Wordpress玩家自创了很多robots写法,列举一些常用的,作为参考(适用于伪静态方式的永久链接):

    Disallow: /page/
    #限制抓取Wordpress分页
    Disallow: /category/*/page/*
    #限制抓取分类的分页
    Disallow: /tag/
    #限制抓取标签页面
    Disallow: */trackback/
    #限制抓取Trackback内容
    Disallow: /category/*
    #限制抓取所有分类列表

    最后,推荐使用 百度站长管理员工具,登录后访问“工具 -> 分析 robots.txt”,检查文件有效性。

    1. 本站所有资源来源于用户上传和网络,如有侵权请邮件联系站长!395912093@qq.com
    2. 您必须在下载后的24个小时之内,从您的电脑中彻底删除上述内容资源!
    3. 如果你也有好源码或者教程,可以到审核区发布,分享有金币奖励和额外收入!
    4. 本站提供的源码、模板、插件等等其他资源,都不包含技术服务请大家谅解!
    5. 如有链接无法下载、失效或广告,请联系管理员处理!
    6. 本站资源售价只是赞助,收取费用仅维持本站的日常运营所需!
    7. 本站不保证所提供下载的资源的准确性、安全性和完整性,源码仅供下载学习之用!
    8. 如用于商业或者非法用途,与本站无关,一切后果请用户自负!
    9. 如遇到加密压缩包,默认解压密码为"www.loowp.com",如遇到无法解压的请联系管理员!
    云创源码 » WordPress博客Robots.txt的写法

    常见问题FAQ

    免费下载或者VIP会员专享资源能否直接商用?
    本站所有资源版权均属于原作者所有,这里所提供资源均只能用于参考学习用,请勿直接商用。若由于商用引起版权纠纷,一切责任均由使用者承担。更多说明请参考 VIP介绍。
    提示下载完但解压或打开不了?
    最常见的情况是下载不完整: 可对比下载完压缩包的与网盘上的容量,若小于网盘提示的容量则是这个原因。这是浏览器下载的bug,建议用百度网盘软件或迅雷下载。若排除这种情况,可在对应资源底部留言,或 联络我们。
    链接地址失效怎么办?
    联系站长QQ:395912093

    发表评论

    售后服务:

    • 售后服务范围 1、商业模板使用范围内问题免费咨询
      2、源码安装、模板安装(一般 ¥90-300)服务答疑仅限SVIP用户
      3、单价超过200元的模板免费一次安装,需提供服务器信息。
      付费增值服务 1、提供dedecms模板、WordPress主题、discuz模板优化等服务请详询在线客服
      2、承接 WordPress、DedeCMS、Discuz 等系统建站、仿站等服务
      3、服务器环境配置(一般 ¥90-300)
      4、网站中毒处理(需额外付费,800元/次/质保三个月)
      售后服务时间 周一至周日(法定节假日除外) 9:00-23:00
      免责声明 本站所提供的模板(主题/插件)等资源仅供学习交流,若使用商业用途,请购买正版授权,否则产生的一切后果将由下载用户自行承担,有部分资源为网上收集或仿制而来,若模板侵犯了您的合法权益,请来信通知我们(Email: 80027422@qq.com),我们会及时删除,给您带来的不便,我们深表歉意!

    Hi, 如果你对这款模板有疑问,可以跟我联系哦!

    联系作者

    发表评论

    售后服务:

    • 售后服务范围 1、商业模板使用范围内问题免费咨询
      2、源码安装、模板安装(一般 ¥90-300)服务答疑仅限SVIP用户
      3、单价超过200元的模板免费一次安装,需提供服务器信息。
      付费增值服务 1、提供dedecms模板、WordPress主题、discuz模板优化等服务请详询在线客服
      2、承接 WordPress、DedeCMS、Discuz 等系统建站、仿站等服务
      3、服务器环境配置(一般 ¥90-300)
      4、网站中毒处理(需额外付费,800元/次/质保三个月)
      售后服务时间 周一至周日(法定节假日除外) 9:00-23:00
      免责声明 本站所提供的模板(主题/插件)等资源仅供学习交流,若使用商业用途,请购买正版授权,否则产生的一切后果将由下载用户自行承担,有部分资源为网上收集或仿制而来,若模板侵犯了您的合法权益,请来信通知我们(Email: 80027422@qq.com),我们会及时删除,给您带来的不便,我们深表歉意!

    Hi, 如果你对这款模板有疑问,可以跟我联系哦!

    联系作者
    • 1319会员总数(位)
    • 1189资源总数(个)
    • 84本周发布(个)
    • 0 今日发布(个)
    • 127稳定运行(天)

    加入VIP获取全站资源