至少选择一种页面类型,才能生成 robots 和 noindex 建议。
网站上线
Robots 抓取预算顾问
选择站点暴露的页面类型,在上线前生成实用的 robots.txt、noindex 和 canonical 建议。
有阻塞0/100
已选页面类型0
Disallow 规则0
Noindex 规则0
Canonical 建议0
需要控制的页面类型
勾选浪费抓取预算或有索引风险的区域。需要 noindex 的页面不会被 robots.txt 阻挡。
抓取预算检查
robots.txt 预览
User-agent: * Disallow:
Noindex 预览
No noindex directives recommended.
Canonical 建议
No canonical changes recommended.
报告预览
# Robots 抓取预算顾问 - 已选页面类型: 0 - Disallow 规则: 0 - Noindex 规则: 0 - Canonical 建议: 0 ## 提醒 - 至少选择一种页面类型,才能生成 robots 和 noindex 建议。 ## robots.txt User-agent: * Disallow: ## Noindex 指令 No noindex directives recommended. ## Canonical 建议 No canonical changes recommended.