Wordpress添加robots.txt文件

1)创建robots.txt

2)robots.txt输入以下参数

 User-agent: *
 Disallow: /wp-admin/
 Disallow: /wp-content/
 Disallow: /wp-includes/
 Disallow: //comment-page-
 Disallow: /?replytocom=
 Disallow: /category//page/ Disallow: /tag//page/
 Disallow: //trackback Disallow: /feed Disallow: //feed
 Disallow: /comments/feed
 Disallow: /?s=*
 Disallow: //?s=\
 Disallow: /?
 Disallow: /attachment/

3)上传 robots.txt 到wordpress根目录

4)查询robots.txt是否生效

输入网址/robots.txt

参数说明:

1、Disallow: /wp-admin/、Disallow: /wp-content/和Disallow: /wp-includes/

用于告诉搜索引擎不要抓取后台程序文件页面。

2、Disallow: /*/comment-page-*和Disallow: /*?replytocom=*

禁止搜索引擎抓取评论分页等相关链接。

3、Disallow: /category/*/page/和Disallow: /tag/*/page/

禁止搜索引擎抓取收录分类和标签的分页。

4、Disallow: /*/trackback

禁止搜索引擎抓取收录trackback等垃圾信息

5、Disallow: /feed、Disallow: /*/feed和Disallow: /comments/feed

禁止搜索引擎抓取收录feed链接,feed只用于订阅本站,与搜索引擎无关。

6、Disallow: /?s=*和Disallow: /*/?s=*\

禁止搜索引擎抓取站内搜索结果

7、Disallow: /*?*

禁止搜索抓取动态页面

8、Disallow: /attachment/

点赞 0

Saiyintai

软件测试工程师

暂无评论

相关推荐

WordPress插入今日头条视频

一、点击分享,选择嵌入代码 点击一键复制 二、wordpress新增文章,选择html模块,粘贴 记录下,省的下次忘记怎么添加 …

Autumn Pro主题首页添加分类

1)进入后台的Autumn→基础设置→分类模块的填写分类ID 2)如何查看分类ID 第一步:进入文章的分类目录,按F12 第二部:查看 …