没有Robots.txt,但我不想索引页面


No Robots.txt but I want to noindex a page

我有一个HTML/PHP/CSS网站,非常简单,我没有robots.txt文件。这个网站有索引,这一切都很棒。

但是现在我为我需要的东西创建了一个页面,我想让这个页面没有索引。

我是否必须为它创建一个robots.txt文件,或者是否有更简单的方法来完成它而不必创建robots.txt文件?

同样,在询问之前,我在谷歌上搜索了这个,我看到了一篇文章,该文章指示将以下代码放在您的页面上的<head>代码下:

<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">

我做到了。然而,在我检查了这个页面之后:http://www.seoreviewtools.com/bulk-meta-robots-checker/

上面写着:Meta robots: Not found说明:对检测到的索引或服务没有限制。

那么,我怎么让这个页面没有索引呢?

虽然拥有robots.txt文件是您所能做的最好的事情,但永远不能保证搜索机器人不会索引该页面。我相信大多数,如果不是所有体面的搜索引擎将遵循该文件中的限制,但有很多其他机器人不在那里。

也就是说,如果你不链接到页面的任何地方,没有搜索引擎会索引它-至少在理论上:如果你或其他人访问该页面,他们的浏览器或扩展提交该页面进行索引,它最终被索引。