Программа / сервис для мониторинга изменений на сайте
Страницы: 1
Программа / сервис для мониторинга изменений на сайте, Регулярная проверка сайта на изменения с фильтрацией по страницам и блокам
Коллеги, добрый день!Подскажите плиз, существует ли программа для мониторинга сайта на изменение контента?
Требования:
1. Отсылка отчетов на почту (установка периодичности)
2. Просмотр отчетов через интерфейс (веб или под винду)
3. Автоматическое построение списка страниц сайта
4. Возможность фильтрации, какие страницы проверять, а какие - нет (на сайтах, где есть фильтры может быть сотни тысяч страниц)
5. Размещение страниц по группам
6. Возможность указать какой блок в какой группе страниц проверять (на главной - проверять все, на внутренних только контент (без меню))
7. Желательно русский интерфейс

Рылись много, нашли пару софтин и пару онлайн сервисов:
www.changedetection.com
www.followthatpage.com
www.internetowl.comtrackengine.com/servlets/com.nexlabs.trackengine.ui.Login
www.copernic.com/en/products/tracker/

Даже спрашивали на https://bountify.co/17

Ни один из вышеперечисленных не устроил из-за прожолривости, тугодумности, или спам атаки о изменении в меню на 100500 страницах.

Помогите пожалуйста с толковым сервисом или софтиной. Можно и платный, главное, чтобы работал как нужно.

Если писать самому веб сервис, как думаете, будет спрос, например за 10-15 баксов в месяц, или одна проверка в месяц- бесплатно, каждая дополнительная - бакс.
Изменено: Антон Золотарев - 20 Ноября 2012 11:32
Привет. Писать такой сервис не имеет смысла, такое уже есть www.sorge.proТеперь по требованиям:
1. Отсылка отчетов на почту (установка периодичности)  - отсылается, но раз в сутки. Можно вообще отсылку отчётов отключить.
2. Просмотр отчетов через интерфейс (веб или под винду) - есть. Через веб-интерфейс.
[FONT=Tahoma, Arial, Helvetica, sans-serif]3. Автоматическое построение списка страниц сайта  - есть. При этом достаточно точно строит список и при желании можно настроить (хотя точность настолько высока, что в настройке нет смысла).[/FONT]
[FONT=Tahoma, Arial, Helvetica, sans-serif]4. Возможность фильтрации, какие страницы проверять, а какие - нет (на сайтах, где есть фильтры может быть сотни тысяч страниц)  - [/FONT]есть.[FONT=Tahoma, Arial, Helvetica, sans-serif] Правда на сотнях тысячах не тестировал, но страниц 900 легко.[/FONT]
5. Размещение страниц по группам - нет. Но признаться, не вижу в этом смысла.
6. Возможность указать какой блок в какой группе страниц проверять (на главной - проверять все, на внутренних только контент (без меню))  - и это есть. Можно создать шаблон и растиражировать правило из него на эти тысячи страниц.
7. Желательно русский интерфейс  - я там только русский и нашел) 



Да, оно платное, но есть тестовый период - попробовать можно. Возможно и бесплатную версию запустят.

Насчёт возможного спроса не знаю, но думаю это очень нишевое решение, иначе бы зарубежных аналогов было бы больше.

Удачи smile:)
Спасибо, потестим.
Но реально есть страницы с фильтрами, например:
hotline.ua/mobile/mobilnye-telefony-i-smartfony/6520/
hotline.ua/mobile/mobilnye-telefony-i-smartfony/6520-7667/


biopromin.info/index.php?gc.fk_id_country=4&orderby=%20ORDER%20BY%20gc.name%20&count=10&type=static&child=certificate&start=0
biopromin.info/index.php?gc.fk_id_country=4,16&orderby=%20ORDER%20BY%20gc.name%20&count=10&type=static&child=certificate&start=0

И если параметров фильтрации десяток, и в каждом около десятка вариантов, получаются сотни тысяч вариантов -> из которых мониторить нужно  несколько сотен.
ТС взгляните программу (линк затёр) SiteTextControl программа предназначена как раз для отслеживания изменения на страницах сайтов. Программа отслеживает и показывает Вам наглядно какие изменения и где именно, в какой строке были сделаны на странице.
В программе существует возможность задавать стоп блоки на страницах которые программа не должна учитывать (это блоки с динамическим содержимым например блок рефералов или блок новостей и тому подобные).
Так же возможна доработка программы под Ваши нужды.
Изменено: Prapovednik - 4 Мая 2015 07:28 (линк затёр и удалил форматирование)
(затёр линк) - посмотрел видео - не подходит.Нужно, чтобы страницы самостоятельно добавлялись.
Я ему линк на сайт, а он список страниц.
Изменено: Prapovednik - 4 Мая 2015 07:29 (линк затёр и удалил форматирование)
Антон, что бы Зорге не находил на сайте URL с переменными вида biopromin.info/index.php?gc.fk_id_country=4,16&orderby=%20ORDER%20BY%20gc.name%20&count=10&type=static&child=certificate&start=0  достаточно в настройках проекта поставить галочку, что вы хотите их фильтровать. Как называется там этот пункт не помню, но такое точно есть. Сам использовую для сканирования интернет-магазина.. и не одного... smile:)
Чесно говоря не разобрался.Может тут есть разработчик, чтоб пообщаться вживую?
Антон Золотарев,  здравствуйте. Если у Вас есть вопросы по использованию сервиса, Вы можете их задать через специальный раздел Техническая поддержка (он находится в верхнем меню сервиса). Мы достаточно оперативно и полно отвечаем на вопросы пользователей.

С уважением,
Служба поддержки проекта SORGE
Долго пытаясь найти что-то подходящее решили сделать сами подобный сервис: neowatcher.com.Он обладает всем, что перечисленно в требованиях + появилось достаточно много фич в процесе реализации, дизайна, пиления, показов друзьям.
Пользователям форума cy-pr.com несколько месяцев бесплатно. Так как сервис в том числе нацелен на SEOшников, нам интересны ваши отзывы, коллеги.
Попробуйте Радар от Топвизор.

Радар - это инструмент для автоматического отслеживания изменений на сайтах. 

В качестве отслеживаемых элементов используются:

заголовок страницы (тег title), 
описание страницы (мета-тег description), 
заголовок документа первого уровня (тег h1),
содержимое страницы (контент),
HTTP коды состояния страниц.

Руководство пользователя: https://tpv.sr/1QoBJ6W/
radar.png (133.84 КБ) [ Скачать ]
Изменено: c3po - 16 Июля 2016 16:01
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
16:11 Давайте начнем обмен отзывами Google maps 
22:14 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
13:03 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов 
13:04 DreamCash.tl - заработок на онлайн-видео. До 95% отчислений, отличный конверт! 
20:13 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
15:04 Adtrafico - Правильная партнёрская сеть под бурж трафик 
19:21 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
19:49 Sectormoney.com - быстрый и удобный обменник 
18:51 TELEGRAM EXPERT — Многоцелевой комбайн по работе с Telegram! 
04:17 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
02:16 BetaTransfer касса — это надежный сервис приема платежей в сфере High Risk 
21:43 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика 
15:03 Продам аккаунты 1 ТБ Облако@Mail.ru 
14:59 PlayPay.biz - Лутбоксы с товарами, играми 
23:14 Точные прогнозы на футбол 
20:09 Сколько сейчас стоит наполнение ИМ? 
12:43 Куплю проигрышные букмекерские аккаунты 
04:33 Половина скидок на распродажах — фейк 
07:53 НейроБабушка наказывает мошенников 
19:59 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
19:57 Пятница 13-ое: VK принял радикальное решение и закрыл доступ к порно контенту