对其进行索引。精彩的新内容,我们将对其进行排序。那么,当您启动一个新网站时,新内容将没有任何价值,因为它会被重复。 如何重新索引您的测试站点。 开发人员可以通过两种方式重新索引网站。
1 - 选中您网站 CMS 中的 noindex 框。例如,如果您有 WordPress,则只需选中" 白俄罗斯 号码数据 阻止搜索引擎索引此网站"复选框. 在 WordPress 中阻止搜索引擎 这会将以下代码添加到每个页面的 <head> 中。
没有索引元数据。 2——您的第二个选择是在 Robots.txt 文件中阻止该网站。这有点困难;因此,大多数 CMS 都有勾选框的选项。 如果您的 CMS 不允许这样做,您可以将以下内容放入您的 Robots.txt 文件中。
用户代理:* 不允许:/ 没有 CMS?如果您通过实现 noindex 来访问头文件,则可以按照上面的代码手动插入代码。 步骤 5——爬行测试站点。 我为什么要抓取测试站点? 您还需要了解测试站点的结构。