请教管理我这个禁止搜索引擎访问的方法是否正确和可行
[i=s] 本帖最后由 leleshe 于 2013-6-18 22:54 编辑 [/i][color=red][/color][color=#ff0000]说明[/color] [color=darkslategray]Robots工具[/color] [p=30, 2, left][color=darkslategray]robots.txt可以告诉搜索引擎您的网站哪些页面可以被收录,哪些页面不可以被收录,如果您不想让搜索引擎收录您网站的某些内容,请用robots.txt文件指定搜索引擎在您网站上的抓取范围。该工具可以检测您的网站是否有robots.txt文件,及robots.txt文件内容,并能按照您的需求生成正确的robots.txt文件。[/color] [/p]
[p=30, 2, left][color=black][/color][/p][p=30, 2, left][color=black][attach]3102[/attach][/color][/p]
[p=30, 2, left][color=black]我在百度上看到这个robots工具 所以我就想让搜索引擎不抓取 /linux下的目录创建规则如下[/color][/p]
[p=30, 2, left]然后生成robot.txt文件下载下来[/p][p=30, 2, left][attach]3105[/attach][/p][p=30, 2, left]我吧它放在了www下 [/p][p=30, 2, left][attach]3104[/attach][/p]
[p=30, 2, left]请问管理这样可行么?行了的话方的地方对不对? 请教[/p][p=30, 2, left]这是禁止所有搜索引擎抓取的代码规则[/p] [i=s] 本帖最后由 leleshe 于 2013-6-18 22:56 编辑 [/i]
这是百度站长工具里面的 大家可以去看看
另外请管理帮忙看看这个帖子的问题谢谢
[url=http://www.wdlinux.cn/bbs/thread-6217-1-1.html]http://www.wdlinux.cn/bbs/thread-6217-1-1.html[/url] 这个是放在网站的根目录下 [b]回复 [url=http://www.wdlinux.cn/bbs/redirect.php?goto=findpost&pid=24581&ptid=6221]3#[/url] [i]admin[/i] [/b]
是要放在wdlinux下面么? robots 仅是对你网站目录起作用,应该放在你的目录下。路径必须可以访问 [b]回复 [url=http://wdlinux.cn/bbs/redirect.php?goto=findpost&pid=24595&ptid=6221]5#[/url] [i]hwzaw88[/i] [/b]
额 那就是说这个对后台控制面板没有作用了呀,郁闷 不明白
页:
[1]