Как собрать все url страниц сайта?

Как собрать все url страниц сайта?, Подскажите, пожалуйста, как спарсить все проиндексированные url

Сообщений: 21874 Регистрация: Май 2011

#16

26 Февраля 2025 18:08

Цитата
Coder пишет: Валерий, 9 лет прошло с последнего поста - так, к слову.

Я даже больше скажу: 5 лет назад ТС дропнул домен, по которому был вопрос, его перехватил какой-то германский киберсквоттер через чешского регистратора и сейчас предлагает его купить на странице заглушке. А по теме софта десктопного, который шарит по сайту и собирает страницы (проверяет битые ссылки и картинки до кучи) - валом гуглится (минимум 3 прям на слуху), причём бесплатного.

Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.

Похожие темы:

02.12.2023 00:11	Как долго индексируется страница
30.08.2023 11:44	Сколько ключей запросов нужно писать на одной странице, чтобы быть в топе
22.05.2023 01:50	За отзыв ТЗ по оптимизации 1й страницы
04.04.2023 10:41	Главная страница сайта недоступна для робота: код ответа страницы «406 (Not Acceptable)»
24.11.2022 10:02	Приставка к страницам пагинации типа ?fbclid

Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
20:51 Google откажется от SMS для авторизации в Gmail. Их заменят на QR-коды 20:33 Второй год подряд Яндекс Переводчик занимает первое место в мире 18:08 Как собрать все url страниц сайта? 22:01 Стоит ли добавлять сайт в Rambler топ 100? 21:59 Как грамотно и эффективно монетизировать форум? 21:06 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 10:37 Партнерская программа Xoffers с прямыми офферами в вертикалях форекс, крипта и бинарные опционы.	20:37 Sectormoney.com - быстрый и удобный обменник 19:05 Новый обменный сервис «Money-office» 17:32 Мобильные прокси для софта 15:54 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру 15:37 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 14:17 Аккаунт Пикабу 13:31 TrueMeds - Революционная Фарма Партнерка! Увеличь свой профит в x2 раза вместе с нами!	22:06 Осторожно! Криптовалюта 21:56 Интернет-провайдера обязали раскрыть 100 предполагаемых пиратов BitTorrent 11:15 С юмором по жизни! 21:24 Точные прогнозы на футбол 18:52 150+ хакерских поисковых систем и инструментов 17:16 Китайский ИИ-ассистент DeepSeek начали запрещать в некоторых странах 14:43 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко

Вверх