Trang chủ · Sản phẩm · Danh sách sản phẩm
Lấy toàn bộ URL toàn site
Site hiện có 3992 URL trong sitemap. Screaming Frog bản miễn phí chỉ crawl tối đa 500 URL / lần, nên không thể spider hết site trong một lần.
Cách 1 — Chỉ cần danh sách URL (nhanh nhất)
- Mở sitemap.txt (một URL mỗi dòng).
- Hoặc tải sitemap.xml đầy đủ (3992 URL).
Cách 2 — Screaming Frog List Mode (khuyến nghị)
- Mode → List
- Upload → Download → dán
https://vuammovn.pro/sitemap.txthoặc từng file phần bên dưới - Crawl từng phần (mỗi phần ≤ 400 URL, dưới hạn mức 500 của bản free)
Sitemap index: /sitemap-index.xml
- Phần 1 — 400 URL (crawl List Mode trong Screaming Frog)
- Phần 2 — 400 URL (crawl List Mode trong Screaming Frog)
- Phần 3 — 400 URL (crawl List Mode trong Screaming Frog)
- Phần 4 — 400 URL (crawl List Mode trong Screaming Frog)
- Phần 5 — 400 URL (crawl List Mode trong Screaming Frog)
- Phần 6 — 400 URL (crawl List Mode trong Screaming Frog)
- Phần 7 — 400 URL (crawl List Mode trong Screaming Frog)
- Phần 8 — 400 URL (crawl List Mode trong Screaming Frog)
- Phần 9 — 400 URL (crawl List Mode trong Screaming Frog)
- Phần 10 — 392 URL (crawl List Mode trong Screaming Frog)
Cách 3 — Spider theo hub HTML (không cần JS)
- /danh-sach-san-pham — sản phẩm (chia trang)
- /danh-sach-chia-se — bài viết
- /danh-sach-shop — gian hàng
- /tat-ca-san-pham — toàn bộ link sản phẩm tĩnh
Nếu dùng Spider từ trang chủ với bản free, tool sẽ dừng ở ~500 URL — đó là giới hạn phần mềm, không phải lỗi site.