Представляю вашему вниманию отдельную услугу - парсеры на основе эмуляции браузера. Часто так происходит, что нужно получить какую-то информацию с сайта, который имеет огромное количество JS запросов, Cookie-отправок, что делает классический парсинг крайне затруднительным.
Эмуляция браузера из Selenium обходит все эти проблемы. Программный код запускает браузер, браузер отрабатывает все нужные и ненужные запросы, далее скрипт получает возможность вести себя как обычный пользователь - авторизоваться, кликать на различные элементы, получать информацию, подгруженную сотней JS etc.
Известно, что к этой эмуляции устойчивы некоторые банковские приложения, они способны определять подобную эмуляцию. Во всех остальных случаях производить махинации легко и не составляет особого труда.
Технология требует повышенное количество оперативной памяти под запускаемые браузеры, количество запускаемых одновременно эмуляций ограничено лишь ей.
Пример эмуляции: простейшая накрутка поведенческих факторов
https://anonfiles.com/v4DfK1ybpf/_1_mp4
https://anonfiles.com/Hf92K9y3p3/_2_mp4
-----
Другая моя тема на тему разработки сайтов:
https://www.cy-pr.com/forum/f74/t103534/?PAGEN_1=1
Webmoney BL: 114, около 10 лет.
-----
Skype: phpquestion (наиболее быстро)
Telegram: https://t.me/phpquestion (наиболее быстро)
Jabber: phpquestion@404.city (наиболее быстро)
Наблюдаются периодические проблемы с поиском ника в скайпе - phpquestion.
Не ищется - пробуйте live:phpquestion
Не помогает - пробуйте phpquestion@tuta.io
Эмуляция браузера из Selenium обходит все эти проблемы. Программный код запускает браузер, браузер отрабатывает все нужные и ненужные запросы, далее скрипт получает возможность вести себя как обычный пользователь - авторизоваться, кликать на различные элементы, получать информацию, подгруженную сотней JS etc.
Известно, что к этой эмуляции устойчивы некоторые банковские приложения, они способны определять подобную эмуляцию. Во всех остальных случаях производить махинации легко и не составляет особого труда.
Технология требует повышенное количество оперативной памяти под запускаемые браузеры, количество запускаемых одновременно эмуляций ограничено лишь ей.
Пример эмуляции: простейшая накрутка поведенческих факторов
https://anonfiles.com/v4DfK1ybpf/_1_mp4
https://anonfiles.com/Hf92K9y3p3/_2_mp4
-----
Другая моя тема на тему разработки сайтов:
https://www.cy-pr.com/forum/f74/t103534/?PAGEN_1=1
Webmoney BL: 114, около 10 лет.
-----
Skype: phpquestion (наиболее быстро)
Telegram: https://t.me/phpquestion (наиболее быстро)
Jabber: phpquestion@404.city (наиболее быстро)
Наблюдаются периодические проблемы с поиском ника в скайпе - phpquestion.
Не ищется - пробуйте live:phpquestion
Не помогает - пробуйте phpquestion@tuta.io
Изменено:
Dizzy - 16 Декабря 2020 12:43