Как собрать все url страниц сайта?

Как собрать все url страниц сайта?, Подскажите, пожалуйста, как спарсить все проиндексированные url

Сообщений: 21876 Регистрация: Май 2011

#16

26 Февраля 2025 18:08

Цитата
Coder пишет: Валерий, 9 лет прошло с последнего поста - так, к слову.

Я даже больше скажу: 5 лет назад ТС дропнул домен, по которому был вопрос, его перехватил какой-то германский киберсквоттер через чешского регистратора и сейчас предлагает его купить на странице заглушке. А по теме софта десктопного, который шарит по сайту и собирает страницы (проверяет битые ссылки и картинки до кучи) - валом гуглится (минимум 3 прям на слуху), причём бесплатного.

Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.

Юрий

Сообщений: 6948 Регистрация: Ноя 2017

#17

27 Февраля 2025 08:07

Цитата
Eye пишет: 5 лет назад ТС дропнул домен,

А это что означает?

Похожие темы:

02.12.2023 00:11	Как долго индексируется страница
30.08.2023 11:44	Сколько ключей запросов нужно писать на одной странице, чтобы быть в топе
22.05.2023 01:50	За отзыв ТЗ по оптимизации 1й страницы
04.04.2023 10:41	Главная страница сайта недоступна для робота: код ответа страницы «406 (Not Acceptable)»
24.11.2022 10:02	Приставка к страницам пагинации типа ?fbclid

Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
09:56 Второй год подряд Яндекс Переводчик занимает первое место в мире 09:50 Google откажется от SMS для авторизации в Gmail. Их заменят на QR-коды 08:07 Как собрать все url страниц сайта? 23:06 Домены под Трастлинк 22:01 Стоит ли добавлять сайт в Rambler топ 100? 21:59 Как грамотно и эффективно монетизировать форум? 21:06 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.	11:33 SiteAnalyzer SEO Tools - бесплатное браузерное расширение для Chrome & Firefox 04:13 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 00:22 GoogleWalker - устранение конкурентов в Google Ads \| Автоматизированная система склика \| АНТИБАН 20:37 Sectormoney.com - быстрый и удобный обменник 19:05 Новый обменный сервис «Money-office» 17:32 Мобильные прокси для софта 15:54 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру	22:06 Осторожно! Криптовалюта 21:56 Интернет-провайдера обязали раскрыть 100 предполагаемых пиратов BitTorrent 11:15 С юмором по жизни! 21:24 Точные прогнозы на футбол 18:52 150+ хакерских поисковых систем и инструментов 17:16 Китайский ИИ-ассистент DeepSeek начали запрещать в некоторых странах 14:43 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко

Вверх