「赣州网站制作」WordPress网站的robots.txt文件写法

2019年7月26日09:29:00 发表评论 42 views

robots.txt文件是1个放置在网站根目录的协议,它的首要作用是用于准确引导搜索引擎蜘蛛抓取和收录页面,告知搜索引擎什么页面能够收录而什么不成以,对于此robots.txt文件的写法,不一样的网站流程步骤有不一样的写法,接下来赣州网站制作小编就而言说WordPress网站的robots.txt文件写法。

「赣州网站制作」WordPress网站的robots.txt文件写法

WordPress网站的robots.txt文件写法

在了解WordPress 网站的robots文件写法之前,先来了解下robots.txt 的根本写法.

1.User-agent:

表明界说哪个搜索引擎,如User-agent:Baiduspider,界说百度蜘蛛。

2.Disallow:

表明制止拜候。

3.Allow:

表明运行拜候。

通过上述3个命令,能够组合多种写法,答应哪个搜索引擎拜候或制止哪个页面。

4.*和$的使用法则:*表明通配符

比如:Disallow: /cgi-bin/*.htm

表明制止收录cgi-bin文件夹下的所有htm后缀的文件。

又或者是

Disallow: /*?post=

表明制止收录含有“post=”字符的地点。

$用来通指制止拜候某后缀的文件

比如:Disallow: /*.css$

表明制止收录以css后缀的文件。

5.Sitemap法则:Sitemap用于告知搜索引擎网站舆图的地位

比如:Sitemap: http://www.muyiblog.com/sitemap.xml

网站什么场所到底要使用robots协议

1.无用页面,不少网站都是有“接洽我们”、“对于此我们”等页面,这些页面相对银河国际来讲,作用不大,此时到底要使用Disallow命令制止这些页面被搜索引擎抓取。

2.动态页面,屏蔽动态页面,有利于网站平安。且多个网址拜候同一页面,会产生权重疏散。所以,通常环境下,屏蔽动态页面,保存静态或伪静态页面。

3.网站后台页面,网站后台也能够归类给无用页面,制止收录有百益而无一害。

通过上述我们知道robots.txt文件的根本写法和什么场所到底要使用robots协议,那针对于WordPress流程步骤搭建的网站,robots.txt怎么写呢?

制止收录WordPress系统文件:

User-agent: *Disallow: /wp-admin/Disallow: /wp-content/Disallow: /wp-includes/

制止收录反复的内容、动态页面、还有另trackback等垃圾信息:

Disallow: /*/comment-page-*Disallow: /*?replytocom=*Disallow: /*/trackbackDisallow: /feedDisallow: /*/feedDisallow: /comments/feedDisallow: /?s=*Disallow: /*/?s=*Disallow: /attachment/

综合以上的写法如下:

User-agent: *Disallow: /wp-admin/Disallow: /wp-content/Disallow: /wp-includes/Disallow: /*/comment-page-*Disallow: /*?replytocom=*Disallow: /*/trackbackDisallow: /feedDisallow: /*/feedDisallow: /comments/feedDisallow: /?s=*Disallow: /*/?s=*Disallow: /attachment/Sitemap: http://www.muyiblog.com/sitemap.xml

最终把代码编写在记事本上,随后保留给robots.txt文件,通过FTP上传到网站的根目录就能够了;如到底要检测robots协议是不是准确生效,能够登岸百度站长平台进行Robots检测。

总结:对于此WordPress网站的robots.txt文件写法,赣州网站制作小编在本文已经做分享,但是上述的只是给予参照,robots.txt文件又到底要依据你网站的实际环境去写。

「赣州网站制作」WordPress网站的robots.txt文件写法》相关阅读:

weinxin
前三位免费诊断网站并出报告!
可免费领取:一.2020最新银河国际7天快速排名教程;二.伪原创工具(带3万条真实词库);三.每天前3名免费诊断网站并出方案;
  • 版权声明:银河国际网址网站内容为高质量伪原创文章,于2019年7月26日09:29:00,由 发表,共 1669 字。本文地址:https://www.kellycameron.net/wzjs/2063.html

发表评论

:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen: