Яндекс: рабочая схема и быстрый индекс статей.
Страницы: Пред. 1 2 3 4 5 6 След.
Яндекс: рабочая схема и быстрый индекс статей., Инструкция от теории к практике, от статей к заработку
Если яндекс создает нагрузку на сервер (хостинг)
В robots.txt пишем след

Цитата
User-agent: Yandex
Crawl-delay: 10 # задает таймаут в 10 секунд

Тем самым мы даем доступ к боту только в 1 запрос в это время.

Для остальных аналогично

Блокируя роботов в .htaccess, если есть нагрузка на сервер:
Цитата
SetEnvIfNoCase User-Agent "^ia_archiver" search_bot
SetEnvIfNoCase User-Agent "^msnbot" search_bot

<Limit GET POST HEAD>
Order Allow,Deny
Allow from all
Deny from env=search_bot
Deny from 87.118.86.131
Deny from 89.149.241
Deny from 89.149.242
Deny from 89.149.243
Deny from 89.149.244
</Limit>

Баним вебархив, msn бота и дальше поисковых по IP


Далее по аналогичному варианту добавляем бан других ботов (ищем User-Agent и добавляем, или по IP) можно узнать из последних посетителей на сайте (на любом хосте есть подобная функция).
Изменено: lol_cp - 24 Июня 2018 16:42
Дальше продолжим, как модеры сделаю меню в старт топике..
Цитата
lol_cp пишет:
Дальше продолжим, как модеры сделаю меню в старт топике..
Информация обновлена.
Уведомил в ЛС.
Благодарю! завтра или послезавтра продолжим
Цитата
lol_cp пишет:
В robots.txt пишем след
Так правильно?

Цитата
lol_cp пишет:
Для остальных аналогично
Читал что можно с помощью Crawl-delay: 10 задать определенные параметры сразу всем ботам. :confused:Как это нужно прописать в robots.txt?
500.PNG (27.1 КБ) [ Скачать ]
Почему завистники всегда чем-то огорчены? Потому что их снедают не только собственные неудачи, но и успехи других.
Можно и так, но сразу после "User-agent: *" Тогда будет это для всех ботов
Цитата
lol_cp пишет:
Можно и так, но сразу после "User-agent: *" Тогда будет это для всех ботов
Спасибо вам за помощь, пойду поставлю, а завтра посмотрю, что будет (я про нагрузку) smile:)
Цитата
SEO BOSS пишет:
Спасибо вам за помощь
Пожалуйста, отпишитесь о результатах, не получится так. Можете попробовать через хетааксес сократить. Либо как вариант сменить хост, если он не может выдержать нагрузок от яшки =)
7. Как поддерживать свое бб и не потеряться среди конкурентов?
В целом проблем у вас не должно быть с этим. Если вы понимаете как работают окна и выдача с ББ. Погнали расскажу все вкратце, дальше додумайтесь сами и делайте smile:).

Многие наверное видели в Яндексе поисковые запросы с временной датой (аля N количество минут или дней назад). Подобное идет на ББ сайты и статьи. У этих окон есть своя особенность, они ротируются и имеют определенное количество на тематику. На игры, развлечения и телепрограмму их до 4-6 штук на страницу. Не зря эти тематики рекомендую.

Если вы хотя бы раз подбирали с ливеинтернет запросы для своего сайта (аля с рейтинга медиа сайтов или СМИ, так как их рейтинги поисковых слов открыты для вас) тогда могли заметить особенность, что запросы от 00.00 работают и обновляются до 5-7.00 утра, дальше они остаются такими же. Потому что есть лимит у статки, подобный лимит по времени есть и у временных окон яндекс. Те, кто залетают ночью туда, спокойно сидят сутку и почти не вылетают в отличие от тех, кто добавляется после в течении дня.

Тем самым лучше всего залетать в ночное время, ставьте на сайтах публиковать в "N время и до N время посты". Ибо индекс у вас должен быть ночной, тогда лучше всего заходит и под утро уже собирается трафик.

Запросы собирать можно заранее, если это Телепрограмма есть куча сайтов, которые дают данные на неделю или на 2 вперед. Тот же сервис яндекс телепрограмма, который парсит данные с более популярного ресурса. Таким образом мы собираем необходимые сериалы, тв передачи  - новинки по многим каналам, и указывает даты их показа. Добавляем все заранее (за ночное время, не публикуя за сутки вперед и так далее если сайт молодой) за 3-5 часов до след дня, если сайт с возвратом и имеет норм показатели, можно и за сутки делать, вы как старичок будете в этих окнах тоже часто появляться.

Немного практике, покажу индекс на старом сайте (который сейчас под фильтром), да я знаю что запросы не скрыл и можно найти в выдачи и сайт и так далее, но не суть. Нашли - молодцы, не палите.
Изменено: lol_cp - 25 Июня 2018 15:58
В принципе вам сейчас расписали в этой теме кнопку бабло 2.0 , которую всем так слезно ждали от зерокула, но выложить он ее не смог ибо именно ТС он хотел эксплуатировать для написания своего мануала, но просчитался)   так что дерзайте!

Вопрос к автору, а каким образом при таком расположении блоков выходит такая хорошая монетизация в адсенсе?
Цитата
Krol пишет:
Вопрос к автору, а каким образом при таком расположении блоков выходит такая хорошая монетизация в адсенсе?
Чаще всего формат "рекомендуемый блок ссылок" от адсенс тянет. Так как там разные запросы с "скачать, смотреть онлайн, играть, онлайн и так далее". То, что часто приписывается к вашему запросу. Пример у вас страница "майнкрафт", человек заходит на нее и где-то под текстом (или сбоку) видит кнопочки белые.

Рисунок


Основная задача - не распыляться на запрос, например если на сайте уже есть страница "майнкрафт последняя версия" не нужно создавать дополнительные страницы "майнкрафт скачать бесплатно последнюю версию" и так далее. Только хуже запросу, который первый пробился в поиске делаете. И убиваете позицию, трафик, а дальше и монетизацию. Если есть чем дополнять, дополняйте первую страницу с заголовками разного уровня (h1-h6).
Цитата
Krol пишет:
В принципе вам сейчас расписали в этой теме кнопку бабло 2.0 , которую всем так слезно ждали от зерокула, но выложить он ее не смог ибо именно ТС он хотел эксплуатировать для написания своего мануала, но просчитался) так что дерзайте!
Да, здесь есть инфа, которую я давал N количеству лиц в скайпе. Однако, сейчас все это доработано и усовершенствовано.  И это все мои практики, эксперименты и так далее. У каждой теории, есть примеры и работы и ни одна. Так как если поставить эксперимент на 1-2х сайтах это мало. Нужно от 5-10, чтобы понять, что работает, а что нет.

После еще будет крутая тема для гугла, но пока не скажу, когда именно. Она не сильно отличается от этой, но есть моменты, которые разбивают в пух и прах тех, кто часто говорит, что ссылки в гугле решают - инфа 100. (да я тоже так говорю, но сейчас работают над немного другим, что в гоше тоже дают норм результаты).

Напоминаю для некоторых, все мои сообщение тут, постятся также в моем закрытом блоге (который позже открою, где можно будет бесплатно подписаться на разные мои сообщения с разных форумов (я сижу не только тут)). Там будет много интересных сообщений, кейсов, теорий и экспериментов в режиме Live, пока разработка сайта идет и стадия проекта всего 35% из 100.

Цитата
Krol пишет:
а каким образом при таком расположении блоков выходит такая хорошая монетизация в адсенсе
Еще один момент, лишить пользователя выбора. ЧТо это значит? убрать со всех картинок (особенно в похожих статьях или боковых панелях) пофиг где, ссылки. Постараться уменьшить ссылки в новостях где реклама, тогда пользователь тоже часто кликает и получается норм выжимать + по SEO это лучше, а не когда вы даете 100500 меню и похожих новостей или ссылок где либо.
Изменено: lol_cp - 25 Июня 2018 16:55
lol_cp, Ждем с нетерпением, оч интересные темы. а новичкам так вообще кубатурить эту инфу месяцами smile:mocking:
Да тема действительно просто шикарная и не только для новичков!
Пожалуй лучшая тема в данном разделе, буду дальше следить за развитием событий)
Изменено: Krol - 25 Июня 2018 18:30
Страницы: Пред. 1 2 3 4 5 6 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
11:36 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
00:53 Доработка сайта 
00:49 Маркированный список выходит за пределы статьи 
00:44 Модуль DLE 
18:09 LGaming - экосистема и партнерская программа в gambling и betting вертикалях 
16:11 Давайте начнем обмен отзывами Google maps 
22:14 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
06:10 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника 
04:22 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
00:54 Переверстать готовый шаблон DLE 
23:30 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика 
19:07 Linken Sphere – браузер-антидетект нового поколения 
15:02 Комплексный прогон по трастовым сайтам, статейное размещение. Рост НЧ-СЧ, Тиц-пр. 
12:42 Sapfirex.com - Современный сервис обмена криптовалют 
22:20 Точные прогнозы на футбол 
20:09 Сколько сейчас стоит наполнение ИМ? 
12:43 Куплю проигрышные букмекерские аккаунты 
04:33 Половина скидок на распродажах — фейк 
07:53 НейроБабушка наказывает мошенников 
19:59 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
19:57 Пятница 13-ое: VK принял радикальное решение и закрыл доступ к порно контенту