以前对seo并不是很在意，这次度娘连续K我两站后，我开始关注起这破玩意儿了。昨天在检查我可怜的L站的访问日志时，意外地发现其实百度蜘蛛依旧来得很勤快，但是返回代码竟然都是404！这就意味着无效页面……

　　仔细看了一下，发现蜘蛛爬的都是include和plugins之类的文件夹下面的文件，我记得这些个文件夹在官方自带的robot.txt里都是有屏蔽的啊，怎么会……

　　看来我犯了一个大错误，上谷哥临时抱佛脚，发现robot.txt只能作用于根目录，对于bbs这样的二级目录是不起作用的，所以我把bbs目录下的robot.txt移到了网站根目录下，然后对robot.txt也稍作了些修改：

[quote]User-agent: *

Disallow: /admin/
Disallow: /api/
Disallow: /attachments/
Disallow: /images/
Disallow: /install/
Disallow: /forumdata/
这个是DZ官网自带的robot.txt文件内容截取


User-agent: *

Disallow: /bbs/admin/
Disallow: /bbs/api/
Disallow: /bbs/attachments/
Disallow: /bbs/images/
Disallow: /bbs/install/
Disallow: /bbs/forumdata/
然后像这样修改一下论坛所在的路径就好了
[/quote]

　　另外，其实有不少人问我为什么要折腾做这么多站，我只有一句话：兴趣爱好罢了……