php禁止打开网站下txt文档

robots协议优化WordPress博客站robots协议写法
　　Disallow：/admin/这里定义是禁止爬寻admin目录下面的目录3、Disallow：/require/这里定义是禁止爬寻require目录下面的目录4、Disallow：/A。引导蜘蛛抓取网站地图；六、如何查看robots协议：1、WordPress站点默认在浏览器中输入：http：//你的域名/robots.txt2、打开FTP，找到网站根目录。