页面可索引性测试
Noindex 检查器
确认页面是否存在 noindex、none 或相互冲突的爬虫指令。
✓ 免费使用 ✓ 无需注册 ✓ 最多跟踪 20 次重定向
1
检查索引控制指令
检查会合并 Meta Robots 与 X-Robots-Tag,并突出显示 noindex 或 none 指令。
2
读懂检查结果
你可以看到当前响应是否要求遵循规则的爬虫不要索引此页面。
3
定位常见问题
通用规则与爬虫专用规则冲突、遗留 noindex,或 CDN 添加的响应头都可能误伤重要页面。
如何理解索引控制指令结果
你可以看到当前响应是否要求遵循规则的爬虫不要索引此页面。工具只读取一次实时响应,无法确认搜索引擎当前收录状态、历史抓取情况或所有爬虫看到的指令。
工具具体检查什么
检查会合并 Meta Robots 与 X-Robots-Tag,并突出显示 noindex 或 none 指令。你可以看到当前响应是否要求遵循规则的爬虫不要索引此页面。
- 检查会合并 Meta Robots 与 X-Robots-Tag,并突出显示 noindex 或 none 指令。
- 通用规则与爬虫专用规则冲突、遗留 noindex,或 CDN 添加的响应头都可能误伤重要页面。
- 从源头移除非预期 noindex,记录有意排除的页面,并在上线后请求重新抓取。
常见问题与处理建议
通用规则与爬虫专用规则冲突、遗留 noindex,或 CDN 添加的响应头都可能误伤重要页面。从源头移除非预期 noindex,记录有意排除的页面,并在上线后请求重新抓取。工具只读取一次实时响应,无法确认搜索引擎当前收录状态、历史抓取情况或所有爬虫看到的指令。
常见问题
这个工具会检查哪些索引控制指令信息?
检查会合并 Meta Robots 与 X-Robots-Tag,并突出显示 noindex 或 none 指令。
应该如何使用检查结果?
你可以看到当前响应是否要求遵循规则的爬虫不要索引此页面。从源头移除非预期 noindex,记录有意排除的页面,并在上线后请求重新抓取。
这个工具有哪些限制?
工具只读取一次实时响应,无法确认搜索引擎当前收录状态、历史抓取情况或所有爬虫看到的指令。