PowerMapper

PowerMapper

快速，轻松地为任何网站的搜索引擎创建可视HTML网站地图和XML网站地图。立即尝试-免费的在线试用。
快速，轻松地为任何网站的搜索引擎创建可视的HTML网站地图和XML网站地图。立即尝试-免费的在线试用。PowerMapper是为信息架构师，可用性分析师和Web开发人员提供的自动站点地图创建工具。它在43个国家/地区（占《财富》 100强企业的30％）以及NASA和MIT等主要组织使用。
powermapper

网站:

特征

分类目录

Linux版PowerMapper的替代品

Screaming Frog SEO Spider

Screaming Frog SEO Spider

Screaming Frog SEO Spider是一个小型桌面程序（PC或Mac），可从SEO角度抓取网站的链接，图像，CSS，脚本和应用程序。
Checkbot

Checkbot

提高您的SEO，速度和安全性：适用于Chrome的Checkbot可以抓取您的网站，以测试您是否遵循了50多种最佳做法。在数分钟内测试1,000页的页面，查看是否有链接断开，重复的内容，无效的HTML，不安全的表单，重定向链等。
Diggernaut
Web Robots
ScrapeStorm
import.io