标签：禁止WordPress抓取

2024-10-18

有些时候，我们希望自己的网站暂时不被搜索引擎蜘蛛抓取，这里我们可以利用robots.txt来禁止抓取。当然，有些搜索引擎不是特别严谨。但是是可以用的。 将下面的代码添加到 robots.txt 中，禁止搜索引擎抓取搜索结果页。 User-a...