我们用ZblogPHP程序搭建好一个网站后,会在网站根目录放一个robots.txt文件,如果没有这个文件,蜘蛛会认为你的网站同意抓取全部网页。那在写robots.txt文件前,就需要对ZblogPHP的目录结构及robots.txt写法有所了解,那接下来一起来了解一下吧!
①、zblog网站系统根目录
feed.php : RSS Feed 入口文件
index.php : 前端页面入口文件
search.php : 搜索入口文件
zb_install 文件夹:zblog系统安装文件夹,安装完毕会自动删除,或手动删除
zb_system 文件夹:为 zblog系统框架的主要文件(屏蔽蜘蛛)
zb_users 文件夹:为 zblog为用户文件夹,里面包含了主题文件夹,插件文件夹,以及附件存放文件夹。
②、zb_users目录
theme :主题模版文件夹
logs :目志文件夹,里面文件是记录错误的(屏蔽蜘蛛)
plugin :插件文件夹
avatar :用户头像文件夹
cache :缓存文件夹
c_option.php :数据库配置文件
emotion :表情文件夹
upload :附件存放文件夹
language :语言包文件夹(屏蔽蜘蛛)
data :数据文件夹(屏蔽蜘蛛)
③、robots.txt写法:
User-agent: *
Disallow: search.php
Disallow: /zb_system/
Disallow: /zb_users/data/
Disallow: /zb_users/language/
Disallow: /zb_users/logs/
Sitemap:http://www.site.com/sitemap.xml
上一篇:织梦自定义图片字段变成{dede:img text=的解决方法