Дайджест новостей A-Parser

Проверка наличия сайта на Miralinks
Новый пример в Каталоге: пресет для проверки доменов на наличие на бирже Miralinks, который проверяет, есть ли домен на Miralinks, выгружает его стоимость и ссылку на профиль на бирже.


 
Парсер Aliexpress товаров
Обновление парсера, позволяющего получать информацию о товаре на AliExpress, подавая в качестве запроса ссылку на товар.
Адаптация к изменениям на ресурсе

JS::TitleParser
Обновление базового примера для парсинга HTML тега title на произвольной странице.
Парсер переписан на JS API v2
Добавлено поле для указания юзер-агента

Парсинг данных о Youtube канале
Обновление парсера данных о Youtube каналах.
Исправлен сбор данных
Адаптация к изменениям в верстке
Убран сбор данных о монетизации, т.к. известный метод определения больше не работает

Google Products
Обновление парсера товаров из Google выдачи.
Ссылка на сайт теперь берется из названия магазина

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.


 - https://t.me/a_parser

 - https://a-parser.com/pages/affiliate/

1.2.2573 - новый парсер отзывов из Google карт, оптимизации работы встроенных парсеров, багфиксы




Улучшения

* Добавлен новый парсер Maps::Google::Reviews, который позволяет парсить отзывы к местам на Google картах
* Парсер SE::Bing полностью переписан, полный список изменений тут
* Добавлены альтернативные сервера авторизации для пользователей из РФ
* Улучшена работа Shop::Amazon: значительно снижена вероятность бана
* Улучшена работа Util::Antigate: теперь манипуляции с картинками каптч занимают меньше времени и потребляют меньше ресурсов
* Улучшена работа HTML::TextExtractor::LangDetect: обновлен модуль определения языка и оптимизирован алгоритм работы
* SE::Yandex::Speller теперь может принимать на вход как ссылки, так и ключевые слова (тексты)
* В Reddit:: Posts добавлена опция Use HTTP/2 transport
* Улучшение скорости работы parser.request и API::Server::Redis (будет заметно при большой интенсивности запросов и большом размере самих запросов(от 10кб))

Исправления в связи с изменениями в выдаче

* Social::Instagram::Geo - исправлена проблема Content mismatch при определенных запросах
* Shop::Amazon - адаптация к изменениям в верстке, исправлена работа при Domain=United Kingdom
* Social::Instagram:: Post - исправлена ошибка при сборе $video_link
* Исправлена работа SE::Quora, теперь требуется указывать куки авторизованного аккаунта, подробнее тут
* Исправлена работа Social::TikTok:: Profile
* Исправлен SE:: DuckDuckGo

Исправления

* SE::Yandex - исправлена поддержка puzzle каптчи при Engine=Browser
* Rank::CMS - исправлена ошибка, возникающая для некоторых технологий
* Исправлен Cloudflare::Radar

Дайджест новостей A-Parser

Выгрузка кликов из GSC
Новый парсер от пользователя @seohive. С его помощью можно выгружать из Google Search Console статистику по кликам в проекте. Выгружает брендовые и все клики. Можно отдельно указать маску url и выгрузить клики определенного раздела сайта. Эти данные можно использовать для создания собственных дашбордов в Google Looker или Яндекс DataLens. Работает по API.

Выгрузка поискового трафика из Яндекс Метрики
Еще один новый парсер от пользователя @seohive. С его помощью можно выгружать из Яндекс Метрики статистику по трафику из поисковых систем. Выгружает трафик из Яндекс, Google и небрендовый из Яндекс. Можно отдельно указать маску url и выгрузить трафик определенного раздела сайта. Эти данные можно использовать для создания собственных дашбордов в Google Looker или Яндекс DataLens. Работает по API.

Выгрузка данных по позициям из Topvisor
И еще один новый парсер от @seohive. С его помощью можно выгружать из проекта в Topvisor статистику по позициям в проекте. Выгружает по группам и конкурентам количество запросов всего, в ТОП 3, ТОП 10 и ТОП 30 по датам. Эти данные можно использовать для создания собственных дашбордов в Google Looker или Яндекс DataLens. Работает по API.

Работа парсера SE::Google
Напоминаем, что недавно Google ввел дополнительную проверку на включенный JS в поиске, из-за чего нарушилась работа многих парсеров и сервисов. Мы оперативно выпустили обновление для
SE::Google и постоянно продолжаем отслеживать изменения. После выпуска stable версии у гугла были еще изменения, поэтому (на момент публикации новости) для корректной работы парсера Google нужно обновиться на последнюю beta версию.

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Дайджест новостей A-Parser

Meta Ad Library
Новый парсер в каталоге: парсер библиотеки рекламы Meta (Facebook, Instagram, Whatsapp...). Позволяет собирать количество рекламных объявлений по ключевому слову с учетом заданных фильтров и массив рекламных объявлений.

Парсер поиска Телеграм постов по ключевым словам с tgdev.io/tme
Обновление одноименного парсера.
Убраны не актуальные опции, убрано решение каптчи
Исправлен сбор результатов

Парсинг объявлений из olx.ua/olx.pl/olx.kz
Обновление парсера данных из объявлений на OLX
Исправлен парсинг номеров телефонов
Исправлен парсинг кол-ва просмотров
JS::SE::Yandex::position::ByRegion
Обновление парсера для проверки позиций сайтов в поисковой выдаче Яндекс сразу по нескольким регионам
Парсер переписан на JS API v2 (TS)
Вместо выбора пресета настроек теперь используется наследование от 
 SE::Yandex::position
В парсере теперь используется новый, более полный и актуальный справочник регионов

Подсказки Google Play
Обновление парсера подсказок магазина Google Play
Адаптация к изменениям на источнике
Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.


 - https://t.me/a_parser


 - https://a-parser.com/pages/affiliate/