Pilotiko feature : 已上线
Noindex:如何让页面不出现在搜索结果中?
一行规则就能告诉搜索引擎:想抓取这个页面可以,但不要把它展示出来。
Noindex 是写给搜索引擎的一条规则,通过 <meta name="robots" content="noindex"> 标签或 HTTP 响应头 X-Robots-Tag 来设置。Googlebot 在抓取时读到这条规则后,Google 就会把该页面从搜索结果中排除,即使其他网站链接了它也一样。知道网址的访问者仍然可以正常打开这个页面。
30 days free, no credit card.
要点
- 两种方法效果相同:meta robots 标签或 X-Robots-Tag 响应头。
- Google 不接受写在 robots.txt 文件中的 noindex 规则。
- 被 robots.txt 屏蔽的页面无法传达它的 noindex:爬虫根本看不到这条规则。
- none 等同于 noindex, nofollow。
- 效果要等到下一次抓取之后才会出现,对访问量很低的页面,有时要几个月之后。
如何编写 noindex 规则?
在页面的 <head> 中,通用写法面向所有支持该规则的搜索引擎:<meta name="robots" content="noindex">。如果只想针对 Google,就把 robots 换成 googlebot [1]。Google 提醒,其他搜索引擎对该规则的解读可能不同,因此页面在别处仍可能可见 [1]。
对于不是 HTML 的文件,例如价格表 PDF 或图片,无法使用标签:这时要在服务器响应中发送 HTTP 响应头 X-Robots-Tag: noindex [1]。两种方法效果相同,noindex 还可以与其他规则组合使用,例如 nofollow [1]。
| 规则 | 效果 |
|---|---|
| all | 没有任何限制;这是默认值,无需书写 |
| noindex | 页面不会出现在搜索结果中 |
| nofollow | Google 不会通过页面上的链接去发现其他页面 |
| none | 等同于 noindex, nofollow |
| nosnippet | 不显示文字摘要,包括 AI 概览 |
| indexifembedded(仅在嵌入页面时进行索引) | 仅与 noindex 搭配使用:允许在其他地方通过 iframe 嵌入的内容被收录 |
来源:Google 的 meta robots 标签规范 [2]。
为什么 noindex 和 robots.txt 不能搭配使用?
这是最常见的陷阱。要让 noindex 规则生效,页面不能被 robots.txt 文件屏蔽:如果爬虫无权进入,就永远看不到这个标签,而只要其他网站指向该页面,它仍可能继续出现在搜索结果中 [1]。Google 还补充说,它不允许在 robots.txt 中写 noindex [1]。
简而言之:robots.txt 控制抓取,noindex 控制在搜索结果中的展示。要移除某个页面,请保持它可被抓取,并加上 noindex。如果页面仍然出现,Google 给出两种可能的原因:它还没有重新抓取该页面,或者 robots.txt 让它无法读取这个标签 [1]。
到底应该有多少页面退出索引?
如何确认 noindex 页面已被正确识别?
Google 建议使用网址检查工具来请求重新抓取,如需紧急移除页面,则参阅其关于移除内容的文档 [1]。该检查工具是 Google Search Console 的一部分。请检查响应头,而不只是 HTML 代码:服务器上遗留的 X-Robots-Tag 响应头与标签的效果完全相同。
Pilotiko 如何使用 noindex?
在 Pilotiko 搭建并托管的网站上,功能性页面带有 noindex, follow 规则,并已从网站地图和 llms.txt 文件中移除。重做后的网站在您公开之前,其临时网址会带着 X-Robots-Tag noindex 响应头提供访问,以避免 Google 中出现您旧网站的副本。对您现有网站的审核会指出要求不被收录的页面,并且在首页上出现这种情况时将其视为严重问题。
常见问题
Noindex 会把页面从网站上删除吗?
不会。页面仍然在线,任何知道网址或链接的人都能访问。它只是从遵守该规则的搜索引擎的结果中消失。
设为 noindex 的页面要多久才会从 Google 消失?
需要等到 Googlebot 再次抓取该页面。Google 表示,对不太重要的页面,这可能需要几个月;可以通过网址检查工具请求重新抓取。
可以把 noindex 写在 robots.txt 里吗?
不可以。Google 不支持 robots.txt 中的这条规则。请使用 meta robots 标签或 X-Robots-Tag 响应头。
Noindex 和 nofollow 有什么区别?
Noindex 阻止页面出现在搜索结果中。Nofollow 要求不要跟踪页面中包含的链接。两者可以组合使用;none 规则等同于二者之和。
如何让 PDF 设为 noindex?
PDF 中无法放置标签。请配置服务器,让它在发送该文件时附带 X-Robots-Tag: noindex 响应头。
资料来源
- Google Search Central, Bloquer l'indexation dans la recherche avec noindex (查阅于 2026年10月15日).
- Google Search Central, Spécifications des balises meta robots, data-nosnippet et X-Robots-Tag (查阅于 2026年10月15日).
延伸阅读
- robots.txt文件告诉搜索引擎爬虫什么?robots.txt是告诉搜索引擎爬虫哪些页面可以访问的文件。了解RFC 9309标准规则、适合中小企业的写法示例,以及代价高昂的常见设置错误,避免网站从搜索结果中消失。
- Sitemap XML:网站地图对搜索引擎有什么用?Sitemap XML(网站地图)是向搜索引擎列出网站页面的文件。本文介绍各类标签、官方规定的限制、适合中小企业的实际示例,以及设置时最容易犯的常见错误,帮你避开这些坑。
- 规范标签:如何告诉搜索引擎页面的正确版本?规范标签(canonical)告诉 Google 在多个重复页面中优先收录哪个网址。本文介绍设置方法、各类信号的强弱、计算示例以及常见错误,帮你更准确地处理网站上的重复页面。
- 元描述:您的页面在谷歌中的标题下方该写什么?元描述是谷歌在搜索结果标题下方(当搜索引擎选择显示时)展示的页面摘要。本文讲解如何撰写元描述、带数字的示例以及常见误区,帮助您的网站在搜索结果中获得更多点击。
- Google Search Console:Google这款免费工具有什么用?Google Search Console详解:这款免费工具有什么用、如何验证网站所有权、每月该查看哪些报告,以及中小企业常犯的错误,帮助您全面掌握网站在Google的表现。
- SEO:什么是自然搜索优化?用通俗的话解释SEO,即自然搜索优化:它涵盖哪些内容、一个面向魁北克服务型中小企业的数字示例,以及需要避免的常见错误,帮助企业主真正看懂搜索引擎优化。
Your whole business, on one screen.
Each department is a room. Pilotiko prepares the work; you approve with one click.
- Call answered
- Appointment confirmed
- Email reply ready
- Invoice prepared