窥网站的秘密网页

当你在一个喜爱的站点漫游时，有没有想到过，Web站的有些内容，不是对外公开的，一般的读者无法看到这些页面。你是否想看看有哪些秘密网页呢，有一个办法，就是利用robots.txt文件。这个文件中列出了未公开页面的名称，用来告诉搜索引擎这些页面不在搜索范围之列。在浏览器地址栏中的网址后加上“/robots.txt”，你就可看到那些秘密网页的文件或文件夹列表。此后，在地址栏直接键入这些网页名，就可一睹秘密页面了。