你最终会得到如下结果

[rakibhasan]

点击 Screaming Frog 中的“清除”按钮，并将用户代理配置更改为以下内容：
5. 开始第二次爬行
6. 保存爬网并运行导出
完成后，将其保存为 mobile-crawl.seospider 并运行“导出所有 URL”报告。将导出内容保存为 mobile-internal_all.csv。

在 Excel 中合并导出
将每个 CSV 导入到新 Excel 电子表格中的单独选项卡中。

创建另一个选项卡，并从每个抓取选项卡的“地址”列中引入 URL。删除重复项。

使用 Vlookups 或其他方法从每个其他选项卡中提取相应的数据。

每个 URL 占一行的选项卡 教师数据库 但每个数据点都有移动和桌面列。如果您可以有条件地格式化/突出显示桌面和移动数据不匹配的实例，则有助于分析。

需要注意的错误和差异
移动网站是否提供类似的导航选项？
信不信由你，如果操作得当，通常可以将相同数量的导航链接放入移动网站而不会破坏用户体验。这里有很多主要零售品牌以不同方式处理它的例子，从大型导航到滑块和汉堡菜单（附注：现在我很想去 White Castle）。

HTTP 变化用户代理响应标头
这是看起来会产生更多缓存问题和麻烦而不是解决方案的事情之一，但 Google 表示，如果同一 URL 上的移动版和桌面版内容有显著变化，则应使用它。我的建议是，如果网站版本之间的差异很小（例如简化的导航、优化的图像、精简的布局、隐藏的一些花哨功能），则避免使用 Vary User-Agent。仅在删除了整段内容和其他重要元素时才使用它。