怎样预防robots.txt文件泄露网站后台目录
发布时间:2022-02-14 08:59:34 所属栏目:经验 来源:互联网
导读:关于如何预防robots.txt文件泄露网站后台目录的问题,我们首先需要了解robots.txt文件的用途和作用。 Robots使用说明 robots.txt可以告诉搜素引擎你网站的哪些页面可以被抓取,哪些页面不可以被抓
关于如何预防robots.txt文件泄露网站后台目录的问题,我们首先需要了解robots.txt文件的用途和作用。 Robots使用说明 robots.txt可以告诉搜素引擎你网站的哪些页面可以被抓取,哪些页面不可以被抓取。 屏蔽无价值的页面。 屏蔽重复路径。 屏蔽死链等。 了解了robots.txt的功能后,我们会发现这样的一个问题: 问题描述: 在robots.txt文件中设置搜索引擎不允许访问“后台目录”,但是别人就会下载到robots.txt然后找出后台目录的地址,路径泄漏导致不安全隐患,有什么解决方法吗?当然有,下面361模板给出一般的解决方法。 解决方法: 首先,robots.txt是必须保证任何人、包括搜索引擎能访问的,否则就没有意义了,不能起到应有的作用。也可以这样说,只要搜索引擎能访问robots.txt,那任何人肯定也能访问。 如果需要设置搜索引擎不允许访问“后台目录”、又不想让其他人看到后台目录(这是必须考虑到的!),假设后台目录是 /admin123/,那么我们可以在设置的时候这样写: User-agent: * Disallow: /adm*/ 关键在第二句,这样写就会阻止搜索引擎访问任何以“adm”开头的文件和目录。为了防止别人猜出你的后台目录,这里截取的越短越好,比如: User-agent: * Disallow: /a*/ 这样,同样起到作用,但留的字母更少,更难猜了,这时会阻止搜索引擎访问所有以“a”开头的文件和目录。 这里需要注意一个问题,就是要避免影响其它的目录和文件,可以通过修改后台目录来实现,不要把别的需要收录的文件或目录一块给屏蔽了。 如果后台目录以某个字母或几个字母开头,那就避免其它需要被收录的文件或目录以这几个字母开头,这样就可以了。 你学会了吗?这就是如何预防robots.txt文件泄露网站后台目录的全部内容。 (编辑:开发网_开封站长网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |