收录 URL 整理
SITEMAP CLASSIFICATION
自动识别网站 URL
不抓取首页 HTML。统一读取 robots.txt 声明及 /sitemap_index.xml、/sitemap.xml、/en/sitemap.xml;根域名和多语言根路径归为首页,其余有效网页归为功能页。
—credits尚未获取
| 序号 | 域名 | 分类 | 识别状态 | 首页 | 功能页 | 操作 | |||
|---|---|---|---|---|---|---|---|---|---|
| 正在读取已上线网站… | |||||||||
SITEMAP CLASSIFICATION
不抓取首页 HTML。统一读取 robots.txt 声明及 /sitemap_index.xml、/sitemap.xml、/en/sitemap.xml;根域名和多语言根路径归为首页,其余有效网页归为功能页。
| 序号 | 域名 | 分类 | 识别状态 | 首页 | 功能页 | 操作 | |||
|---|---|---|---|---|---|---|---|---|---|
| 正在读取已上线网站… | |||||||||