Вопрос к знатокам WPGrabber

Сообщений: 168 Регистрация: Апр 2017

30 Января 2019 23:26

Можно ли включить парсер с начала 2018г. к примеру с января и спарсить старые записи?
Или парсер в любом случае старые новости не сможет спарсить?

http://megaslesar.ru/ | http://dverportal.ru/ | http://buresh-art.ru/

Web scraping

Сообщений: 39 Регистрация: Ноя 2017

31 Января 2019 10:56

Спарсит всё, что найдёт по адресу "URL индексной страницы". Если это sitemap, то можно весь сайт спарсить

Изменено: Web scraping - 31 Января 2019 10:57

Настройка лент WPGrabber (http://"https://goo.gl/jKucGK")
Парсинг AVITO (http://"https://goo.gl/hAxLVS") по вашим запросам
Установлю и настрою анонимный прокси сервер 3proxy (http://"https://goo.gl/Yk1Uu7") на вашем сервере

Александр Крикун Сообщений: 6 Регистрация: Сен 2013	#3 9 Мая 2019 14:56 Как вариант можете установить крон задачу на сервере. По поводу sitemap все верно. Неплохой вариант. Более гемарно же будет парсить меняя индексную страницу на страницу с пагинацией.

Похожие темы:

31.01.2021 16:37	Вопрос по плагину Yoast Seo или ламер постигает азы сайтостроения
18.11.2020 20:20	Вопрос про вордпресс и технические дубли страниц.
06.10.2020 11:26	Вопрос по багу в меню
16.01.2020 00:51	Вопрос к тем, кто переходил на https с Вордпрессом
29.01.2019 08:02	Вопрос по добавлении записи в WP

Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
16:55 Яндекс прекращает поддержку технологии Турбо 16:44 «Хлебные крошки» в адресе сайтов исчезнут из результатов поиска Google 16:38 ру гембла 10:59 DreamCash.tl - заработок на онлайн-видео. До 95% отчислений, отличный конверт! 09:06 Бесплатные посещения 01:10 Adsense личный опыт 22:07 Помогите найти шаблон	20:25 TrueMeds - Революционная Фарма Партнерка! Увеличь свой профит в x2 раза вместе с нами! 19:14 Анализ курсов и недежности обменников - Kurs.Expert 18:02 Новый обменный сервис «Money-office» 16:31 Качественные услуги по телеграм (инвайт, рассылка)(Invite, mailing list) 15:46 CoinCapital 15:45 Создам под вашу нишу сетку сайтов-сателлитов для привлечения целевого трафика 14:01 ~Мобильные Proxy 4g/LTE с ротацией, настоящий безлимит, без ограничений скорости, RU~	20:44 Точные прогнозы на футбол 10:05 Китайский ИИ-ассистент DeepSeek начали запрещать в некоторых странах 21:05 Telegram не смог провести различие между требованиями автократических режимов и законными демократическими запросами 08:12 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 07:48 США готовят закон для уничтожения пиратских сайтов во всех странах мира 02:10 [Новая партнерка] Goldbet Partners — прямой рекламодатель одноименного казино Goldbet 21:19 С юмором по жизни!

Вверх