URL INVENTORY

Sitemap URL 提取器

从 sitemap 中提取所有 URL 链接。

立即开始

批量提取·导出列表·站点审计

域名、Sitemap URL 或 XML 内容

数据处理：公开 Sitemap 地址或你粘贴的 XML 会发送到 GoTools 服务器以完成提取；Sitemap 索引中的公开子文件也会按需获取。请勿提交内网地址、认证信息或敏感内容。查看隐私政策

什么是 Sitemap？

Sitemap（站点地图）是一个 XML 文件，列出了网站上所有重要页面的 URL。它帮助搜索引擎（如 Google、Bing）更有效地抓取和索引网站内容，是 SEO 优化的重要工具。

Sitemap 文件通常位于网站根目录下，如 https://example.com/sitemap.xml。只输入 example.com 时，本工具会自动查找该地址。文件可包含每个页面的 URL、最后修改时间、更新频率和优先级等信息。

为什么需要提取 Sitemap URL？

SEO 审计：快速获取网站所有页面列表，进行 SEO 分析和优化
内容迁移：网站迁移或重构时，批量提取 URL 用于重定向配置
竞品分析：分析竞争对手网站结构和内容分布
批量测试：提取 URL 列表用于性能测试、可用性检查或自动化测试
数据采集：为爬虫程序提供完整的 URL 列表，提高采集效率

常见 Sitemap 格式

本工具支持标准的 XML sitemap 格式，包括：

标准 Sitemap：包含 <url> 和 <loc> 标签的基础格式
Sitemap 索引：包含多个 sitemap 文件链接的索引文件
图片 Sitemap：专门用于图片 URL 的 sitemap 格式
视频 Sitemap：包含视频内容信息的 sitemap 格式

使用技巧

大多数网站的 sitemap 位于 /sitemap.xml 或 /sitemap_index.xml
可以在网站的 robots.txt 文件中查找 sitemap 位置
如果 sitemap 文件很大，建议直接粘贴 XML 内容而不是使用 URL 方式
提取的 URL 可以导入到 Excel、数据库或其他工具中进行进一步分析
提取在服务器端完成：公开 Sitemap 地址或粘贴的 XML 会发送到 GoTools 服务器处理，请勿提交内网地址、认证信息或敏感内容

Sitemap URL 提取器帮助、示例与常见问题

使用指南

Sitemap URL 提取器用于从 sitemap.xml 或 sitemap 索引文件中提取页面链接，适合 SEO 审计、站点迁移、批量检测和内容盘点。你可以只输入域名（如 example.com）自动访问根目录的 sitemap.xml，也可以输入完整 sitemap 地址或直接粘贴 XML 内容。大型站点常把 sitemap 拆成多个子文件；工具会自动展开 sitemapindex 中的子 sitemap，并汇总最终页面 URL。拿到 URL 列表后，建议按路径、语言、栏目或日期分组，检查是否存在重复、错误协议、旧域名、测试路径或不应被索引的页面。

示例

站点改版前提取全部旧 URL，作为 301 重定向表和上线验收清单。
SEO 审计时导出 URL，批量检查状态码、canonical、标题和收录情况。
竞品研究时观察目录结构、内容规模和语言版本分布。

常见问题

为什么 URL 方式失败？目标站可能限制跨域、阻止抓取或 sitemap 地址并不公开。
Sitemap 索引会自动展开吗？会。输入 sitemapindex 地址或粘贴索引 XML 时，工具会继续抓取子 sitemap 并汇总页面 URL。
提取结果就是全部页面吗？不一定。Sitemap 只代表站点声明给搜索引擎的重要 URL。

进阶建议

拿到 URL 清单后，不要只看数量，更要检查站点结构是否健康。路径层级是否过深、分页和筛选页是否混入索引、旧语言版本是否仍被声明、http 与 https 是否混杂，这些都会影响抓取效率和搜索表现。大型站点可以把导出的 URL 与访问日志、收录数据、重定向表交叉比对，找到真正需要处理的页面。

排查方法

排查 Sitemap 提取结果时，先确认入口文件是 urlset 还是 sitemapindex，再看子 sitemap 是否都能访问、是否被 robots 或防盗链拦截。URL 数量异常时，检查命名空间、压缩文件、重定向、跨域限制和 XML 是否被 HTML 错误页替代；导出后再按域名、协议、语言和路径分组找异常。