标题: [BUG反馈] 能不能不让蜘蛛抓取安装页面？ [打印本页]

---

作者: burn    时间: 2013-4-5 14:59     标题: 能不能不让蜘蛛抓取安装页面？

能不能不让蜘蛛抓取安装页面？？刚才查了一下，百度等能抓取安装成功页面~~
自行百度测试：恭喜 wdos 安装成功

---

作者: burn    时间: 2013-4-5 15:01

wdOS,wdcp,wddns,wdcdn,lamp,lnmp,lnamp,LANMP一键安装包... 恭喜,lanmp_wdcp 安装成功!lanmp_wdcp是一个集成nginx,apache,php,mysql等web...wdOS官网: http://www...
abcccc.com/ 1小时前 - 百度快照

---

作者: qq514408389    时间: 2013-4-5 16:31

可以建立个robots.txt文件来限制抓取的范围
http://www.baidu.com/search/robots.html

---

欢迎光临 WDlinux官方论坛 (http://www.wdlinux.cn/bbs/)

Powered by Discuz! 7.2