是什么触发了这个问题?
此问题报告网站站点地图文件中列出的返回403(禁止)HTTP状态码的所有URL。
为什么这很重要?
网站的站点地图文件必须列出您希望搜索引擎抓取和索引的所有页面。 此外,谷歌将站点地图数据作为选择规范URL时的因素之一。
搜索引擎爬虫将无法抓取并索引无法访问的页面。
这可能会导致网站的可索引性问题。
如何解决问题?
您的站点地图文件必须仅包含返回200(OK)响应码的有效URL。
从站点地图中删除返回403响应的URL。
请注意,由于DoS保护系统或网络服务器的防火墙配置,URL可能专门向我们的爬虫返回403(禁止)响应码。 检查报告的URL是否能从您的浏览器访问。 您还应该在谷歌站长工具的站点地图报告中检查这些URL是否出现。