申请网站
忘记密码
密 码：
登录名：
建站咨询热线：
0532-88781131
、
15166683288
返回贴子列表
发表新贴
主题：
通过robots.txt看到网站后台目录
共有
1637
人浏览过本贴
主贴管理
置 顶
加 精
结 贴
转 贴
昵称：奈薇建站网
论坛积分：108060
发贴等级：
21
发贴数：1159
回贴数：1282
被砸鸡蛋：
1
获赠鲜花：
182
发表时间：2019/8/22 10:04:00
楼 主
通过robots.txt看到网站后台目录
搜索引擎通过robots.txt文件内容可以识别出
青岛网站建设
根目录哪些是允许收录的内容，哪些是禁止收录的内容，但是如果黑客直接访问如www.abc/robots.txt直接打开一些敏感目录，如后台目录等，带来极大的安全隐患。
可通过下面几个方法禁止目录被看到：
方法1
假设我们后台目录是/system/，那么我们可以在设置的时候这样写：
User-agent:*
Disallow:/sys
关键在第二行，这样写就会阻止搜索引擎访问任何以“sys”开头的文件和目录。为了防止别人猜出你的后台目录，这里截取的越短越好，比如：
User-agent:*
Disallow:/d
这样，同样起到作用，但留的字母更少，更难猜了，这时会阻止搜索引擎访问所有以d”开头的文件和目录。
这里我们需要注意的问题是，为了避免影响其它目录的收录，可以修改一下后台目录文件名。如果后台目录以某个字母或几个字母开头，那就避免其它需要被收录的文件或目录以这几个字母开头，这样就可以了。
方法2
后台目录做个首页文件,跳转到真正的后台首页文件.
比如说,后台首页是index.php,而服务器优先index.html
写个index.html文件,跳转到index.php
index.html文件在<head>中加入
<METANAME="ROBOTS"CONTENT="NOINDEX,NOFOLLOW">,
搜索爬虫就不会继续到该目录下的其他页面了
注：
NOINDEX指令：表示拒绝搜索机器人索引本页，但可跟踪该页上的链接;
NOFOLLOW指令：表示拒绝机器人跟踪本页链接，但可索引本页。
还可以加入，NOARCHIVE：告诉Google不要保存含此标签的网页的快照。
补充：
只是拦截百度蜘蛛爬取网页，而允许其他搜索引擎收录：
<METANAME="baiduspider"CONTENT="NOINDEX,NOFOLLOW">
允许搜索引擎收录你的网页，但禁止其收录网页上的图片：
<METANAME="ROBOTS"CONTENT="NOIMAGEINDEX">
如果是linux+apache,还可以用.htaccess文件限制
这2个方法可以根据自己情况进行使用。
奈薇建站网致力于，让每个中国人、每个中国企业都拥有自己的“官方网站”！
回复此贴
单贴管理
修 改
删 除
清理签名
TOP
共
0
个回贴 分
0
页
上一页 / 下一页 当前第
页
奈薇建站网青岛网站建设公司/青岛网站制作公司，专业提供"气质"型网站建设及精美网站制作服务，同时欢迎各地网站建设公司、网站制作公司代理我们的奈薇建站系统共同发展
热点地区：
青岛网站建设价格
青岛即墨网站制作公司
开发区信息港
山东在线门户
1
182
