用 robots.txt 与 noindex 分层控制抓取与收录，明确功能页、归档页、附件页该禁哪些、该放哪些，并用 Robots Meta 把规则做成可维护默认值。

了解 Rank Math 插件生成的 XML 站点地图与 robots.txt 文件的作用，探讨它们如何共同决定网页是否被搜索引擎收录。通过合理配置站点地图与 robots.txt 文件，提高网站的收录率，优化SEO表现。