用织梦DEDECMS建站的站长会发现，DEDECMS自带的robots.txt文件设置很简单（开发者基于每个网站的目次结构和优化目标不一样的考虑），并不能满足网站优化要求，那怎样接合自个儿网站的情况，做好robots.txt优化呢？以下绍介一点儿自个儿的想法，仅供参考。

得用于未伪静态的DEDECMS网站。

User-agent: *
Disallow: /dede 管理后台目次，需要改名，具体设置后面具体讲
Disallow: /include 手续核心文件目次
Disallow: /member 会员管理目次，有点文件可以开放
Disallow: /plus 插件及匡助功能目次 ，有点文件可以开放，如search.php
Disallow: /templets 默认模板储存目次
Disallow: /data 系统缓存或其他可写入数据储存目次
Disallow: /uploads 上传下载文件保管目次,不想搜引得擎援用图片的话，禁阻
Disallow: /images 系统默认模板图片储存目次
Disallow: /index.php 网站默认首页，静态化的话，最好禁阻
Disallow: /404.html
Allow: /plus/search.php 开放禁阻目次里的具体文件
...
基本设置是这样的，下边着意讲下后台管理目次和栏目页的设置：
1.dede目次，为了网站安全考量需要改名。然而改名然后，大家不免疑惑：改了名，在robots.txt文件里怎么设置呢？直接禁阻抓取，仍然泄漏了后台目次，等于改名无效。那么该若何解决这个问题呢?我们可以经过下边的设置解决这个问题，如后台目次为dedecms：
Disallow: /d*ms

这么我们就能即禁阻了搜引得擎的抓取，又不会泄漏了后台目次名称。

2.栏目页。有的人会注意到，假如网站不做伪静态优化的话，栏目分页后会有两个链接指向栏目首页，如*/web/和*/web/list_1_1.html，为了网站优化，提议先将栏目分页优化以下（具体做法大家可以在网上找），把首页和第一页的链接改为*/web/的仪式，而后在robots.txt文件里做以下设置:

Disallow: /*1.html$

以上就是DEDECMS robots.txt文件的设置，大家可以依据自个儿网站的情况具体设置。

注意事项：

1.按官方申说设置好目次权限；http://www.xuejiqiao.com/chajian/2014310.html
2.后台目次改后的名称开头字母和结尾字母不要和其它目次同样；
3.用百度站长工具测试一下robots.txt文件设置是否管用。

如果了解了，就赶紧给自己的网站设置优化下吧！