专注国内外云服务器
分享建站技术教程

WordPress网站如何利用robots.txt文件进行SEO优化?

立即购买

阿里云服务器 ¥102元/年 云数据库37.5元/年 限时

个人、企业均可购买 | 更多配置0.8折特惠

吾上云WORDPRESS教程最新“WordPress网站如何利用robots.txt文件进行SEO优化?”

  Robots是网站与蜘蛛通信的重要渠道。该站点通过Robots文件声明网站不希望被搜索引擎收录,或者指定搜索引擎只收录特定的部分。WordPress网站如何利用robots.txt文件进行SEO优化?

  当搜索引擎机器人访问该网站时,它将首先在站点的根目录中查找robots.txt文件。如果有此文件,它将根据该文件的内容来确定该文件的范围,如果没有,则默认访问并包括所有页面。

  了解Robots协议的作用,以下是WordPress网站如何编写robots.txt文件的具体说明:

  默认情况下,WordPress站点是在浏览器中输入的:http://您的域名/robots.txt,显示如下内容:

  User-agent: * Disallow: /wp-admin/ Disallow: /wp-includes/

  这是WordPress自动生成的,这意味着搜索引擎被告知不要抓取后台进程文件。

  User-agent: *

  Disallow: /wp-admin/

  Disallow: /wp-content/

  Disallow: /wp-includes/

  Disallow: /*/comment-page-*

  Disallow: /*?replytocom=*

  Disallow: /category/*/page/

  Disallow: /tag/*/page/

  Disallow: /*/trackback

  Disallow: /feed

  Disallow: /*/feed

  Disallow: /comments/feed

  Disallow: /?s=*

  Disallow: /*/?s=*

  Disallow: /*?*

  Disallow: /attachment/

  用法:创建一个名为robots.txt文本文件,将上面的内容放入其中,并将其上传到站点的根目录,或者单击下面的命令下载机器人文件并将其上传到站点的根目录。

  以下是对每个项目的作用的单独解释:

  1.Disallow: /wp-admin/、Disallow: /wp-content/和Disallow: /wp-includes/

  用于告诉搜索引擎不要爬行守护进程文件页。

  2.Disallow: /*/comment-page-*和Disallow: /*?replytocom=*

  搜索引擎被禁止爬行相关链接,如评论分页。

  3.Disallow: /category/*/page/和Disallow: /tag/*/page/

  搜索引擎禁止爬行包含类别和标签的网页。

  4.Disallow: /*/trackback

  禁止搜索引擎抓取类似trackback之类的垃圾信息

  5.Disallow: /feed、Disallow: /*/feed和Disallow: /comments/feed

  禁止搜索引擎爬行以包含提要链接。提要仅用于订阅此站点,而不考虑搜索引擎。

  6.Disallow: /?s=*和Disallow: /*/?s=*

  禁止搜索引擎在车站爬行搜索结果

  7.Disallow: /*?*

  不要搜索和爬行动态页面

  8.Disallow: /attachment/

  禁止搜索引擎爬行附件页,如无意义的图片附件页。

  上面只是一些基本的写作,当然还有很多,我们可以根据自己的需要修改,修改并上传到站点的根目录,我们也可以使用百度搜索资源平台Robots工具来创建、验证、更新robots.txt文件,或者查看站点robots.txt文件在百度中的有效性。

文章来源于互联网WORDPRESS教程:WordPress网站如何利用robots.txt文件进行SEO优化?,
阿里云服务器89元起,点击购买
腾讯云服务器95元/年起 点击购买

相关推荐: 如何优化WordPress网站核心网页指标

Core Web Vitals(网站核心网页指标)是Google的一项举措,旨在帮助网站站长改善用户体验和网站质量。这些评估指标对于任何网站的成功都是至关重要的。 在本教程中,我们将向您展示如何针对WordPress优化Google提出的网站核心网页指标。 什…

赞(0)
未经允许不得转载:吾上云 » WordPress网站如何利用robots.txt文件进行SEO优化?
分享到: 更多 (0)
  • 阿里云
    基础型云服务器

    1核CPU

    2G内存

    40G硬盘

    1M带宽

    独立IP

    分布式存储

    适合企业官网、个人站长类网站

    ¥89/1年 原价¥903.40

  • 阿里云
    超值型云服务器

    2核CPU

    4G内存

    40G硬盘

    3M带宽

    独立IP

    分布式存储

    适合企业官网、行业门户类网站

    ¥899/3年 原价¥8281

  • 阿里云
    高性能云服务器

    2核CPU

    8G内存

    40G硬盘

    5M带宽

    独立IP

    分布式存储

    适合电商、数据库等企业级应用

    ¥1399/3年¥14765

  • 腾讯云
    基础型云服务器

    1核CPU

    2G内存

    50G硬盘

    1M带宽

    独立IP

    分布式存储

    适合企业官网、个人站长类网站

    ¥95/1年 原价¥834

  • 腾讯云
    超值型云服务器

    1核CPU

    2G内存

    50G硬盘

    1M带宽

    独立IP

    分布式存储

    适合企业官网、行业门户类网站

    ¥288/3年 原价¥2502

  • 腾讯云
    高性能云服务器

    4核CPU

    8G内存

    50G硬盘

    5M带宽

    独立IP

    分布式存储

    适合电商、数据库等企业级应用

    ¥2188/3年¥13986

  • 阿里云
    基础型云服务器

    1核CPU

    2G内存

    40G硬盘

    1M带宽

    独立IP

    分布式存储

    适合企业官网、个人站长类网站

    ¥89/1年 原价¥903.40

  • 阿里云
    超值型云服务器

    2核CPU

    4G内存

    40G硬盘

    3M带宽

    独立IP

    分布式存储

    适合企业官网、行业门户类网站

    ¥899/3年 原价¥8281

  • 阿里云
    高性能云服务器

    2核CPU

    8G内存

    40G硬盘

    5M带宽

    独立IP

    分布式存储

    适合电商、数据库等企业级应用

    ¥1399/3年¥14765

  • 腾讯云
    基础型云服务器

    1核CPU

    2G内存

    50G硬盘

    1M带宽

    独立IP

    分布式存储

    适合企业官网、个人站长类网站

    ¥95/1年 原价¥834

  • 腾讯云
    超值型云服务器

    1核CPU

    2G内存

    50G硬盘

    1M带宽

    独立IP

    分布式存储

    适合企业官网、行业门户类网站

    ¥288/3年 原价¥2502

  • 腾讯云
    高性能云服务器

    4核CPU

    8G内存

    50G硬盘

    5M带宽

    独立IP

    分布式存储

    适合电商、数据库等企业级应用

    ¥2188/3年¥13986

评论 抢沙发

评论前必须登录!

 

吾上云 专注服务器选购

购买云服务器联系我们