关于织梦DEDECMS robots文件设置的想法

2014 年 8 月 18 日3570

发广告比较严重的请注意咯,直接封号,不通知

用织梦DEDECMS建站的站长会发现,DEDECMS自带的robotstxt文件设置很简单(开发者基于每个网站的目录结构和优化目的不同的考虑),并不能完全满足网站的优化要求,那怎样才能结合自己网站的情况,做好robotstxt优化呢?以下介绍一点自己的想法,仅供参考。

适用于未伪静态的DEDECMS网站。

User-agent *

Disallow /dede 管理后台目录,需要改名,具体设置后面具体讲

Disallow /include 程序核心文件目录

Disallow /member 会员管理目录,有些文件可以开放

Disallow /plus 插件及辅助功能目录 ,有些文件可以开放,如searchphp

Disallow /templets 默认模板存放目录

Disallow /data 系统缓存或其它可写入数据存放目录

Disallow /uploads 上传下载文件保存目录,不想搜索引擎引用图片的话,禁止

Disallow /images 系统默认模板图片存放目录

Disallow /indexphp 网站默认首页,静态化的话,最好禁止

Disallow /404html

Allow /plus/searchphp 开放禁止目录里的具体文件

基本设置就是这样,下面着重讲下后台管理目录和栏目页的设置

1dede目录,为了网站安全考虑需要改名。然而改名之后,大家不免疑惑改了名,在robotstxt文件里怎么设置呢?直接禁止抓取,还是泄露了后台目录,等于改名无效。那么该如何解决这个问题呢?我们可以通过下面的设置解决这个问题,如后台目录为dedecms

Disallow /d*ms

这样我们就能即禁止了搜索引擎的抓取,又不会泄露了后台目录名称。

2栏目页。有些人会注意到,如果网站不做伪静态优化的话,栏目分页后会有两个链接指向栏目首页,如*/web/和*/web/list_1_1html,观赏龟图片http://http://www.zjjv.com//,为了网站优化,建议先将栏目分页优化以下(具体做法大家可以在网上找),把首页和第一页的链接改为*/web/的形式,然后在robotstxt文件里做以下设置

Disallow /*1html$

以上就是DEDECMS robotstxt文件的设置,大家可以根据自己网站的情况具体设置。

注意事项

1按官方说明设置好目录权限;

2后台目录改后的名称开头字母和结尾字母不要和其他目录一样;

3用百度站长工具测试一下robotstxt文件设置是否有效。

0 0