并不是重新启动时应该考虑的所有事

seoleader217@gm

  #5 重新启动时检查旧 URL 列表 在重新启动期间，尖叫青蛙的列表模式是一个特殊功能。您可以在此处插入先前抓取的旧 URL 列表并对其进行抓取。为此，请转到顶部菜单中的“模式”>“列表”。然后点击“上传”。使用“Sreaming Frog”特别方便的是，您现在可以上传文件，但也可以简单地复制并粘贴列表或简单地抓取 XML 站点地图。  聆听模式尖叫青蛙 通过列表爬网，您可以立即确定重新启动后是否所有 URL 均已正确转发。重要提示：在这里，您也应该预先进行设置，使机器人始终遵循所有重定向。





当然，这 情，但是有一篇关于它的单独的博客文章，其中包括重新启动清单。  顺便说一句：列表模式在免费版本中不限于500个URL，但 越南 手机号码 是您可以抓取无限数量的URL！      #6 规范 关于规范，我特别喜欢右侧尖叫青蛙本身的显示选项。在这里您可以一目了然地看到有多少 URL 被规范化，有多少 URL 没有规范标签。您还可以单击各个点，然后轻松将其导出到 Excel。  《尖叫青蛙》中的规范观点  #7 Dan 的技巧：创建或抓取 XML 站点地图 使用 Screaming Frog，您不仅可以轻松创建 XML 站点地图，还可以抓取实时站点地图以确定其是否包含不正确的页面等。







Screaming Frog 联合创始人 Dan Sharp 解释道：  “我们喜欢的一个简单方法是清理 XML 站点地图。如果 XML 站点地图已上线，请切换到列表模式（模式 > 列表）并选择“下载站点地图”或“下载站点地图索引”，然后输入 URL。请记住还要转到“配置 > Robots.txt > 设置”并取消选中“忽略 robots.txt”，以便您可以查看 XML 站点地图中是否存在任何不允许的 URL。然后，SEO 蜘蛛将直接从实时站点地图中抓取 URL。然后，您可以检查是否有任何不是 200 响应的内容（无响应、3XX、4XX、5XX 等），并找出被 robots.txt、规范化或 noindex 阻止且不应该出现在其中的 URL。