页面可索引性测试

Noindex 检查器

确认页面是否存在 noindex、none 或相互冲突的爬虫指令。

✓ 免费使用 ✓ 无需注册 ✓ 最多跟踪 20 次重定向
1

检查索引控制指令

检查会合并 Meta Robots 与 X-Robots-Tag,并突出显示 noindex 或 none 指令。

2

读懂检查结果

你可以看到当前响应是否要求遵循规则的爬虫不要索引此页面。

3

定位常见问题

通用规则与爬虫专用规则冲突、遗留 noindex,或 CDN 添加的响应头都可能误伤重要页面。

如何理解索引控制指令结果

你可以看到当前响应是否要求遵循规则的爬虫不要索引此页面。工具只读取一次实时响应,无法确认搜索引擎当前收录状态、历史抓取情况或所有爬虫看到的指令。

工具具体检查什么

检查会合并 Meta Robots 与 X-Robots-Tag,并突出显示 noindex 或 none 指令。你可以看到当前响应是否要求遵循规则的爬虫不要索引此页面。

  • 检查会合并 Meta Robots 与 X-Robots-Tag,并突出显示 noindex 或 none 指令。
  • 通用规则与爬虫专用规则冲突、遗留 noindex,或 CDN 添加的响应头都可能误伤重要页面。
  • 从源头移除非预期 noindex,记录有意排除的页面,并在上线后请求重新抓取。

常见问题与处理建议

通用规则与爬虫专用规则冲突、遗留 noindex,或 CDN 添加的响应头都可能误伤重要页面。从源头移除非预期 noindex,记录有意排除的页面,并在上线后请求重新抓取。工具只读取一次实时响应,无法确认搜索引擎当前收录状态、历史抓取情况或所有爬虫看到的指令。

常见问题

这个工具会检查哪些索引控制指令信息?

检查会合并 Meta Robots 与 X-Robots-Tag,并突出显示 noindex 或 none 指令。

应该如何使用检查结果?

你可以看到当前响应是否要求遵循规则的爬虫不要索引此页面。从源头移除非预期 noindex,记录有意排除的页面,并在上线后请求重新抓取。

这个工具有哪些限制?

工具只读取一次实时响应,无法确认搜索引擎当前收录状态、历史抓取情况或所有爬虫看到的指令。

相关 URL 工具与指南