wordpress如何写robot.txt

刚才偶然看到一篇文章是关于wordpress中的robot.txt的。说是默认情况下wordpress是动态生成robot.txt给搜索引擎(而我访问http://www.coowii.com/robot.txt根本就没有给我返回任何东西,当然现在手动添加后有了),而且自动生成的robot.txt里根本就没有内容,这样很难免一些系统文件目录被搜索引擎扫面,为了避免隐私的流失,我们需要手动写一个,这样wordpress就不会动态生成robot.txt了。而且据说在robot.txt里写上自己sitemap的文件地址后还会有利于收录,我之前已经在Google提交了sitemap文件了的,估计影响不会太大,但是这个禁止搜索引擎访问的目录表很有用。

我所写的例子是“

User-agent: *
Disallow: /wp-admin
Disallow: /wp-content
Disallow: /wp-includes
Disallow: /?r=*
Disallow: /old

Sitemap:http://www.coowii.com/sitemap.xml
Sitemap:http://www.coowii.com/sitemap.xml.gz

User-agent所代表的是搜索引擎的蜘蛛,*代表所有搜索引擎,一般用这个,谁也不想自己的博客不在某个搜索引擎出现吧,当然特殊情况除外,目前我还没有想到这样的特殊情况。。。

Disallow:代表不允许搜索引擎访问的文件目录,冒号需要请问半角,冒号后有没有空格无所谓。

Sitemap:后边填写你网站的sitemap文件地址,有利于搜索引擎收录你的文章。

好了,编写完之后通过ftp上传到你的博客根目录即可。

Author: vincent

2 thoughts on “wordpress如何写robot.txt

发表评论

电子邮件地址不会被公开。 必填项已用*标注