在线爬取网站链接
输入网站域名后,通过页面链接抓取网站内容并生成站点地图。
SiteMap网站地图生成器
在线生成网站地图输入网站域名后,SiteMap网站地图生成器可在线爬取页面链接,按设置生成SiteMap.XML、SiteMap.TXT和SiteMap.HTML文件,并支持断链检查、robots.txt过滤、链接去重、内链与出站链筛选等选项。生成文件可下载后上传至网站根目录,再提交给相应搜索引擎。
围绕网站地图生成提供爬虫设置、链接分析、格式输出和使用说明,帮助站长处理网站地图文件。
输入网站域名后,通过页面链接抓取网站内容并生成站点地图。
支持内链、出站链和全部链接筛选,并可进行内链死链判断。
提供robots.txt过滤选项,按网站爬虫协议处理可抓取链接。
可生成SiteMap.XML、SiteMap.TXT和SiteMap.HTML格式的网站地图文件。
支持字符集、更新频率、页面优先级、URL自动补全、链接去重和页面遍历等设置。
提供网站地图生成、格式说明、搜索引擎提交和抓取问题相关的公开文章。
页面公开说明显示,SiteMap网站地图爬虫的最新更新版本日期为2019年4月18日。
公开文章介绍输入网址、设置字符集和抓取选项,并下载生成的XML、TXT或HTML网站地图文件。
公开文章说明将网站地图文件上传至网站后,可按搜索引擎要求提交相应文件地址。
可查看网站地图制作方法、SiteMap格式说明、提交方式及相关问题答疑。