家居网站制作一个robots.txt

如何写一个robots.txt文件

一个robots.txt文件,将有助于搜索引擎正确索引你的页面。它告诉搜索引擎不走了 - 对面的一个网站地图。这是搜索引擎索引你的网站时,他们的第一件事,是一个组织严密的专业家居网站制作的一个重要组成部分。

编辑步骤

1、一个简单的文本编辑器(如记事本)打开。

2、写在第一行。所有的robots.txt文件开始此行
User-Agent: *

3、决定哪些地方你不想要编入索引。
如果您希望您的网站被索引的所有部分,添加下面一行:
Disallow:
线的每一个领域,你要被编 ​​入索引。例如,如果你不想要的图像和一个私人文件夹索引:
Disallow: /images/
Disallow: /private/

4、保存该文件。使用的名称为“robots.txt”。

5、上传到您的网站的主目录。

编辑提示

对于一个更强大的robots.txt文件,它通常是最好的,使用机器人发生器。这些网站有时有​​标准的robots.txt文件,您可以下载。

编辑警告

如果你没有你的图像索引,你将失去相当多的潜在的搜索引擎的流量。
在您的网站的robots.txt文件没有创建安全区域,因为只有良好的机器人将服从他​​们。防止灌水恶意程式,黑客等不良机器人仍可以访问您的网站,因为他们的每一个领域。