提供zblog模板_zblog主题_wordpress模板的下载和定制

zblog的robots.txt怎么写?zblog的robots.txt文件示例下载

天兴工作室 2017-08-11 教程 5327 5 评论


robots.txt对于比较seo的站长来说是一个很重要的东西,经常有朋友再问zblog的robots怎么写?本文就来详细说明下。

首先来解释下robots.txt是什么robots.txt有什么作用

robots.txt是搜索引擎中访问网站的时候要查看的第一个文件。当一个搜索蜘蛛访问一个站点时,它会首先检查该站点根目录下是否存在robots.txt,如果存在,搜索机器人就会按照该文件中的内容来确定访问的范围;如果该文件不存在,所有的搜索蜘蛛将能够访问网站上所有没有被口令保护的页面。

以上内容来自百度百科。

看了上面的内容就能了解robots.txt是告诉搜索们该收录哪些页面, 所以我们就要知道zblog程序里面哪有文件夹是给蜘蛛爬的哪些文件夹不能给蜘蛛爬。请参考“https://www.txcstx.cn/post/1085.html”。

给大家一个示范的robots.txt也就是本站的robots.txt文件:

User-agent: *
Disallow: /zb_users/
Disallow: /zb_system/
Sitemap:http://www.txcstx.cn/sitemap.xml

上面的robots.txt意思是让蜘蛛不要爬zb_users和zb_system这两个文件夹,另外本站的“Sitemap”文件是“seo工具大全”插件生成的,你们可以下载其他插件(https://app.zblogcn.com/search.php?q=Sitemap)生成Sitemap文件。


没有找到解决你问题的教程?

您可以试着搜索一下或者直接在线提问。我们也提供收费技术支持,有需要可以在线联系我们。

在线提问 在线客服

5 位网友评论:

  • 奋斗王

    奋斗王 1年前 (2019-04-28) 回复

    Sitemap: 后面加不加空格都无所谓的吗?

  • 芝麻鲸选

    芝麻鲸选 1年前 (2019-04-20) 回复

    刚好在找这个方法,首页看到的解决了我的问题,谢谢了

  • 北方seo

    北方seo 2年前 (2019-03-29) 回复

    我想问一下,把这两个目录都屏蔽之后,百度蜘蛛来了之后抓哪些页面呢?
    感觉文章页 列表页什么的 是不是都放在模板文件夹里啊? 屏蔽/zb_users/ 会不会影响抓取

    • 天兴工作室

      天兴工作室 2年前 (2019-03-29) 回复

      zblog是个动态程序,文章的路径都是动态生成的,屏蔽这两个文件不会造成任何问题

  • 我爱贝

    我爱贝 3年前 (2017-08-15) 回复

    这些还都是没研究过的,一直都是随蜘蛛爬。教程非常不错,简单就能上手。

取消回复欢迎 发表评论:

  • 请填写验证码
  • 最新文章
  • 热文排行
  • 最多评论
标签聚合

社交账号登录

将本文分享给你的朋友们