Цитата |
---|
kermt пишет:
Привет, всем. :)Недавно увидел, что процент отказов на одном СДЛ близится к 90%. Тематика СМИ о видеоиграх. Немного был шокирован, впервые такой процент вижу. Теперь ломаю голову, что с этим делать. Прошу помочь советами. Может, косяки какие-то есть, которые я уже не вижу...
Сайт: GameData.club |
Судя по всему боты к вам ломятся.
Как человек "немножко" связанный с парсингом могу кинуть такой вариант:
Есть ПО, которое грузит страницу в полноценном браузере (иногда нужно и такое), извлекает инфу и обрубает. Считается отказом.
Так же есть множество пауков (в том числе и аля госсударственных, которые шастают в поиске чего нить запрещенного), которые периодически активизируются.
Могут ПФ сбивать и т.д. и т.п.
Помнится этот вопрос несколько раз на форму обсуждали.
Но в 2-х словах решение:
1) Настройка метрики
2) Настройка запрета по ip зловредам