Robottxt文件含义 尽管互联网上“白帽”

bdkhatun34@gmai

网站推广的最初策略是针对真实的人，但您必须为搜索机器人做一些事情。这是指创建 robots.txt 文件，这是搜索引擎了解您网站的第一件事。 该文件位于网站的根目录中，包含搜索机器人的说明，简单来说就是“它应该去哪里和不应该去哪里”。在robot.txt文件中，您可以禁止对某些页面和部分建立索引（例如，如果它们包含重复内容，则其索引可能会损害网站的排名），指定从服务器下载信息的时间间隔等等。

如何创建robot.txt文件？ 该文件是在常规记事本或任何其他可以以 *txt 格式保存的文本编辑器中创建的。如果您没有针对机器人的任何具体说明，您可以将此文件留空 - 然后机器人将浏览网站 C级执行名单 的所有页面并为其看到的所有内容建立索引。请记住，为了正确操作，必须以小写形式键入文件名。 是否可以制作多个robot.txt 文件？ 可以做到，但是没有意义，因为机器人不会在根目录之外的任何地方寻找这样的文件。如果您仍想为子目录创建类似的文件，则需要将它们全部收集到一个根文件中，或使用 Robots 元标记将它们组合起来。



此元标记通常会阻止机器人索引页面或跟踪页面上的链接。 如果您要在 Runet 中推广网站，最重要的是为 Yandex 创建 robots.txt。记住正确使用主机指令也很重要，这对于这个搜索引擎很重要。有时，访问您网站的用户甚至没有意识到他是通过广告链接来的，而是相信他自己偶然发现了一个非常有趣且具有教育意义的资源。就这样吧，但是目的已经达到了——用户访问了网站，但是他是否会留在这里，是否会订购和购买东西，很大程度上取决于网站的质量。