Парсинг урл и метатегов

Сообщений: 2 Регистрация: Сен 2017

4 Сентября 2017 15:51

Добрый день ребята, подскажите пожалуйста если стоит задача сделать таблицу ексель формата (url:title:desription)Как можно автоматизировать сбор данных страниц в разных категориях на сайте интернет магазина

Иван

Сообщений: 2247 Регистрация: Янв 2014

5 Сентября 2017 00:42

Самый простой вариант:
1. Screaming Frog SEO Spider – можно найти ломаную (nulled) версию в сети.
2. Netpeak Spider – демо версия на месяц вроде.

Программы аналогичные в принципе по функционалу, отличаются только визуально. Спарсите сайт или рубрики, оттычкуете нужные данные (урл+метатеги) и выгрузите в эксель.

Изменено: Иван - 5 Сентября 2017 00:43

Eye

Сообщений: 21815 Регистрация: Май 2011

5 Сентября 2017 00:46

Цитата
Иваанушка Онсамый пишет: Как можно автоматизировать сбор данных страниц в разных категориях на сайте интернет магазина

В чём вопрос? Вы не умеете парсить или не умеете менять формат?

Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.

Иваанушка Онсамый

Сообщений: 2 Регистрация: Сен 2017

7 Сентября 2017 20:08

Цитата
Иван пишет: 2. Netpeak Spider – демо версия на месяц вроде.

Все отлично, только есть одна проблема)
При выгрузки данных у меня все в одну строчку выводиться url, title и description и не как не могу по колонкам раскидать. (такое не только при выгрузке с этой программы, с остальных тоже самое)
Вы с таким не сталкивались?

Иван Сообщений: 2247 Регистрация: Янв 2014	#5 8 Сентября 2017 03:20 А чем вы открываете? У мене в экселе проблем не было. Там вроде в настройках или перед самой выгрузкой формат выбирается, вплоть до пдф

Новые темы	Объявления	Свободное общение
01:26 Как правильно покупать ссылки для поддомена? 00:18 «Хлебные крошки» в адресе сайтов исчезнут из результатов поиска Google 20:11 Роскомнадзор отказал в регистрации трети блогеров-десятитысячников 20:05 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 15:02 Adtrafico - Правильная партнёрская сеть под бурж трафик 18:48 АП Яндекс ИКС 16.11.2023 18:42 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options	22:28 Приватные мобильные прокси Украины безлимиты 4g UA Водафон Киевстар Лайф 18:16 Swap-line.com – это сервис быстрого обмена криптовалют на различные цифровые активы, а также на наличные средства во многих городах Украины! 11:21 BIGPROXY.SHOP - Резидентные Ротационные Backconnect Proxy USA EUROPA MIX [Безлимитный трафик] 22:13 Starcrown Partners – Партнерская программа для гемблинг/беттинг трафика 19:38 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 19:35 Продам аккаунты HH.RU 23:48 Обмен криптовалюты без KYC и AML	20:46 Точные прогнозы на футбол 18:54 США готовят закон для уничтожения пиратских сайтов во всех странах мира 21:19 С юмором по жизни! 18:15 Telegram уничтожил официальный канал легендарного российского торрент-трекера 18:19 Уникальный сервис SEO продвижения 14:45 (затёр сайт) 19:39 Куплю проигрышные букмекерские аккаунты

Новые темы

Объявления

Свободное общение

01:26 Как правильно покупать ссылки для поддомена?
00:18 «Хлебные крошки» в адресе сайтов исчезнут из результатов поиска Google
20:11 Роскомнадзор отказал в регистрации трети блогеров-десятитысячников
20:05 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
15:02 Adtrafico - Правильная партнёрская сеть под бурж трафик
18:48 АП Яндекс ИКС 16.11.2023
18:42 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options

22:28 Приватные мобильные прокси Украины безлимиты 4g UA Водафон Киевстар Лайф
18:16 Swap-line.com – это сервис быстрого обмена криптовалют на различные цифровые активы, а также на наличные средства во многих городах Украины!
11:21 BIGPROXY.SHOP - Резидентные Ротационные Backconnect Proxy USA EUROPA MIX [Безлимитный трафик]
22:13 Starcrown Partners – Партнерская программа для гемблинг/беттинг трафика
19:38 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств
19:35 Продам аккаунты HH.RU
23:48 Обмен криптовалюты без KYC и AML

20:46 Точные прогнозы на футбол
18:54 США готовят закон для уничтожения пиратских сайтов во всех странах мира
21:19 С юмором по жизни!
18:15 Telegram уничтожил официальный канал легендарного российского торрент-трекера
18:19 Уникальный сервис SEO продвижения
14:45 (затёр сайт)
19:39 Куплю проигрышные букмекерские аккаунты

25.10.2020 21:58	Парсинг интернет магазинов, сайтов, фото, видео
15.06.2020 15:15	25% скидка на парсинг email адресов
06.04.2020 19:49	Парсинг 2гис. Сбор контактов с 2gis
24.02.2020 17:49	ВК - слив данных или парсинг?
09.01.2019 23:13	Помогите с парсингом прайса