Robots.txt 与 Sitemap 分析

使用方法

1. 输入公开网页或网站的网址。
2. 运行检查并查看严重问题、警告和通过项目。
3. 在自己的网站与 Search Console 中核实重要变更。

重要限制

检查爬虫指令和 XML Sitemap。