Как собрать все url страниц сайта?

Сообщений: 306 Регистрация: Фев 2013

3 Мая 2015 20:33

Доброго времени суток, уважаемые форумчане. Подскажите, пожалуйста, сервис, который поможет собрать списком все url сайта. Заранее спасибо!

http://www.inwin.com.ua - Интернет аукцион Украины

SharkCinema

Сообщений: 619 Регистрация: Окт 2014

3 Мая 2015 20:39

site.com/sitemap.xml

http://smswifi.ru - SAS WiFi СМС авторизация для вашего бизнеса. | http://supportila.ru - личный блог.

Zulios

Сообщений: 306 Регистрация: Фев 2013

3 Мая 2015 21:13

Данные страницы нужно получить без даты добавления их в карту. Есть ли какая-то программа, которая спарсит все страницы списком в виде url каждой страницы?

Алексей SP

Сообщений: 1464 Регистрация: Сен 2012

3 Мая 2015 22:14

STGrabber поможет

Открой свой магазин за 5 минут, их товары, их обслуживание, с тебя только клиенты >>> РЕГИСТРАЦИЯ <<<
Скрин выплат по запросу.
Рефералам помощь.

SharkCinema

Сообщений: 619 Регистрация: Окт 2014

4 Мая 2015 00:05

Так а что мешает сохранить sitemap и вытащить ссылки через регулярку?

<url>|(<loc>(|\r\n))(.*)((|\r\n)</loc>)|(<(.*)>(|\r\n)*(.*)(|\r\n)*</(.*)>)|<.*>|(\r\n)+

\3\r\n

Marques

Сообщений: 408 Регистрация: Авг 2010

4 Мая 2015 00:34

Цитата
SharkCinema пишет: Так а что мешает сохранить sitemap и вытащить ссылки через регулярку? <url>\|(<loc>(\|\r\n))(.)((\|\r\n)</loc>\|(<(.)>(\|\r\n)(.)(\|\r\n)</(.)>\|<.*>\|(\r\n)+ \3\r\n

Поясните для "валенков" как это делается)

Биржа криптовалют удобная аналитика, хранение, покупка

Zulios

Сообщений: 306 Регистрация: Фев 2013

4 Мая 2015 01:02

Тоже интересует этот вопрос для валенков smile:)

Zulios

Сообщений: 306 Регистрация: Фев 2013

4 Мая 2015 01:03

Цитата
Алексей SP пишет: STGrabber поможет

Сейчас пробовал найти - нигде не находит. По всем адресам либо файлик отсутствует, либо вирусные файлики лежат

Zulios

Сообщений: 306 Регистрация: Фев 2013

4 Мая 2015 01:15

Цитата
Алексей SP пишет: STGrabber поможет

Спасибо большое! Таки нашел программку, в момент все урлы с карты сайта спарсила! Очень помогли, спасибо еще раз smile:)

Роман Цабров

Сообщений: 194 Регистрация: Янв 2013

#10

4 Мая 2015 17:06

content downlader легко решает такие вопросы

Самая лучшая ВАП партнерка! Без санкций ТУТ

serogo evgo

Сообщений: 408 Регистрация: Мар 2015

#11

9 Декабря 2015 02:53

STGrabber у кого нить осталась эта програма или что то подобное нужно собрать все ссылки с карты сайта. либо плагин для wp для сбора списка всех адресов страниц

создание продвижение сайтов ! качество и доступная цена

Ravager

Сообщений: 29 Регистрация: Ноя 2015

#12

9 Декабря 2015 18:41

Цитата

Marques пишет:

Цитата
SharkCinema пишет: Так а что мешает сохранить sitemap и вытащить ссылки через регулярку? <url>\|(<loc>(\|\r\n))(.)((\|\r\n)</loc>\|(<(.)>(\|\r\n)(.)(\|\r\n)</(.)>\|<.*>\|(\r\n)+ \3\r\n

Поясните для "валенков" как это делается)

Нужен текстовый редактор подходящий, например sublime text. Просто делаете поиск по регулярному выражению на выбор всех результатов в файле sitemap - где все ссылки лежат.

Александр Фокс Сообщений: 178 Регистрация: Ноя 2013	#13 24 Марта 2016 16:20 Мне тоже нужны были все адреса страниц сайта, поступил следующим образом. Скачал карту сайта и открыл при помощи Notepad ++. Все очень просто. Поделки своими руками

Новые темы	Объявления	Свободное общение
18:41 Продвижение заграницей 22:36 Стоит ли добавлять сайт в Rambler топ 100? 16:34 Работает ли ссылочное продвижение 2019 – 2020? 16:22 Adsense личный опыт 16:20 АП Яндекс ИКС 16.11.2023 16:19 У Google наблюдается снижение трафика и, как следствие, уменьшение прибыли 12:10 Взрывной рост роботности в Метрике	21:27 Starcrown Partners – Партнерская программа для гемблинг/беттинг трафика 18:57 Прием платежей для HIGH RISK \| Прием платежей без сайта 18:57 Услуги рассылки Вконтакте 18:57 Услуги рассылки Viber\|Whatsapp\|IMO. 18:57 Рассылка в TELEGRAM \|Большой опыт работы \| Любые тематики \| Лучшая конверсия 18:24 Приватные мобильные прокси Украины безлимиты 4g UA Водафон Киевстар Лайф 17:25 TETChange-Обменник криптовалют	01:26 Точные прогнозы на футбол 12:12 Linux - это максимальная свобода 20:09 Сколько сейчас стоит наполнение ИМ? 12:43 Куплю проигрышные букмекерские аккаунты 04:33 Половина скидок на распродажах — фейк 07:53 НейроБабушка наказывает мошенников 19:59 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко

Новые темы

Объявления

Свободное общение

18:41 Продвижение заграницей
22:36 Стоит ли добавлять сайт в Rambler топ 100?
16:34 Работает ли ссылочное продвижение 2019 – 2020?
16:22 Adsense личный опыт
16:20 АП Яндекс ИКС 16.11.2023
16:19 У Google наблюдается снижение трафика и, как следствие, уменьшение прибыли
12:10 Взрывной рост роботности в Метрике

21:27 Starcrown Partners – Партнерская программа для гемблинг/беттинг трафика
18:57 Прием платежей для HIGH RISK | Прием платежей без сайта
18:57 Услуги рассылки Вконтакте
18:57 Услуги рассылки Viber|Whatsapp|IMO.
18:57 Рассылка в TELEGRAM |Большой опыт работы | Любые тематики | Лучшая конверсия
18:24 Приватные мобильные прокси Украины безлимиты 4g UA Водафон Киевстар Лайф
17:25 TETChange-Обменник криптовалют

01:26 Точные прогнозы на футбол
12:12 Linux - это максимальная свобода
20:09 Сколько сейчас стоит наполнение ИМ?
12:43 Куплю проигрышные букмекерские аккаунты
04:33 Половина скидок на распродажах — фейк
07:53 НейроБабушка наказывает мошенников
19:59 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко

02.12.2023 00:11	Как долго индексируется страница
30.08.2023 11:44	Сколько ключей запросов нужно писать на одной странице, чтобы быть в топе
22.05.2023 01:50	За отзыв ТЗ по оптимизации 1й страницы
04.04.2023 10:41	Главная страница сайта недоступна для робота: код ответа страницы «406 (Not Acceptable)»
24.11.2022 10:02	Приставка к страницам пагинации типа ?fbclid