0
用于SEO网站审核的完整爬网程序工具，包括标题，描述，标题，重复内容，关键字分析，内部链接，锚文本，内部链接汁流，重定向，规范和其他类型的对文件和URL的引用。可以创建各种站点地图，包括带有hreflang信息的XML，视频，图像，RSS / ROR，文本，自定义HTML / CSS / Javascript，用于可视化图形的DOT等。网站中URL的数量没有固定上限-实际限制取决于，但通常在100.000到1.000.000页之间。易于过滤扫描结果，查看选定数据并将其导出为CSV，如果需要，可以将其导入其他工具。可以对爬网程序引擎进行高度配置，以遵循自定义规则，以对要爬网的页面以及要在结果中包括哪些URL进行定制。支持通过丰富的命令行界面进行计划。
techseo360
特征
分类目录
具有商业许可证的Linux版TechSEO360的替代方案
22
Screaming Frog SEO Spider
Screaming Frog SEO Spider是一个小型桌面程序（PC或Mac），可从SEO角度抓取网站的链接，图像，CSS，脚本和应用程序。