Один из читателей этой темы, хостер, попросил повторно протестировать качество своего хостинга.

Для теста нам выдали сервер на самом дорогом тарифном плане Битрикс-Эксперт.

Реклама на сайте обещает:

Цитата
Производительность: 100%

поэтому мы предполагаем, что сервер наберет не менее 30 баллов ...

Однако, запустив внутренний тест, видим, что наши ожидания не оправдались ...




Сервер не набрал даже 30 баллов, то есть норматив 2008 года для серверов "младших классов VDS-256" не сдан ...

Запускаем многопоточный тест на способность держать соединения, генерировать страницы и отдавать их пользователям ...




На первой же секунде теста сервер выстреливает пачку из 500 ошибок, после чего на 13 секунде впадает в глубокую кому ...

Чтобы понять, в чем причина такой внезапной клинической смерти, вскрываем еще не остывшее тело пациента и запускаем посмертную диагностику




Быстрый взгляд на историю болезни пациента выделяет несколько моментов:

1.1 - Локация = Франция
( без комментариев ... )

1.2 - Операционная система = Cloud Linux
( пока ни один из протестированных нами серверов на этой OS не смог набрать более 30 баллов ...)

1.3 - Размер свободной памяти = 162 Мб
( противники тут же могут возразить, что она вся вытекла, например в кеш ? ... )

1.4 - Время бесперебойной работы - всего 154 дня ...
( без комментариев ... )

1.5 - На сервере обнаружено 598 сайтов
( противники тут же могут возразить, что на их серверах работает без проблем 5980 "высоконагруженных" проектов,
именно поэтому мы и запускаем многопоточный тест из расчета всего по 10 посетителей на один сайт сервера ... )

На копии экрана многопоточного теста преднамеренно показан адрес сайта сервера,
чтобы хостер не стал возражать, что тестировали не его хостинг ...

Остальные выводы наши уважаемые читатели могут сделать сами ...

Информация о хостере

Код
Местоположение  - Калининград Тестируемый ДЦ  - Франция Начало работы   - Май 2008 Клиентская база - 284 домена Тарифный план   - 900 рублей в месяц

Двое читателей этой темы, которые сами же просили о повторном тестировании и агрессивно рекламирующие свои услуги по хостингу,
остались категорически несогласны с результатами тестирования качества своих услуг.

Первый читатель, который размахивал на ряде форумов флагом с цифрой 120 баллов,
и представляющий интересы хостинга adminvps, стал заявлять, что его неправильно меряют:

Цитата
По вашим тестам 70 баллов 2 место, ну а мы фотошопим 120

Кого он хотел удивить своими мифическими цифрами ?

Показываем результаты реального тестирования, которые были произведены на другом сервере хостинга более 4 лет назад




как видим на копии экрана, производительность более 130 баллов ...

Пытливый читатель сразу может задать вопрос:
"Почему тогда нынешний лидер рейтинга набирает всего 80 баллов, в чем причина ?"

Ответ на такой вопрос довольно прост:

1.1 - Тогда использовалась версия РНР v5.2
1.2 - Тогда использовалась версия Битрикс v8.6

Сейчас текущая версия Битрикс v14 , а каждый разработчик сайта знает, что любой переход к более
старшим версиям всегда увеличивает, вместе с функциональностью,
количество компонент и вес, соответственно и массу ядра сайта ...
Кроме этого, на версии РНР v5.2 разогнать сайт до скорости 100 баллов было более простой задачей,
чем сейчас получить хотя-бы двух-кратный прирост производительности, то есть 60 баллов ...
Кроме этого, мы уже много раз объясняли читателям, как можно получить фиктивные цифры производительности,
полагаем на этом вопрос по поводу хостинга adminvps закрыт ...

Второй читатель, представляющий интересы хостинга lite-host, стал также заявлять, что его сервер преднамеренно неправильно измеряют,
стал обвинять в низких показателях своего хостинга всех вокруг, исключая себя,
начиная с разработчиков 1С-Битрикс и заканчивая автором этой публикации.
По его мнению, абсолютно все вокруг были виноваты в том,
что его сервер падает в момент тестирования и не набирает даже 30 баллов,
в своих обвинениях злопыхатель дошел до того, что затестил сам себя и получил всего 1 балл !!!




После этого он разразился тирадами в стиле "Наш ответ Чемберлену",
из его путанной речи можно было уловить смысл только нескольких фраз:

Цитата
Описываем секреты и магию тестирования ... 1С-Битрикс с нестандартным шаблоном ... Почему Вы игнорируете стандартный тест в 32 соединения ? Но исходя из того, что хостинг аккаунт не рассчитан на 500+ соединений, то 1 балл можно принять нормой ??? Не люблю таких людей ... И не люблю, когда они остаются безнаказанными.

Он уже дошел до того, что ставит себя на место СУДЬИ - безупречного в своих мыслях, мотивах и поступках ???

Попробуем пройтись по пунктам этих смехотворных утверждений

Под тяжестью неоспоримых улик и доказательств этот так называемый хостер был вынужден признаться,
что он установил ограничение для посетителей в 48 соединений !!!

Теперь давайте просто задумаемся, к чему это приводит на практике ?

Для иллюстрации ситуации будем показывать примеры сайтов, которые используют форумные движки.
Движок форума позволяет видеть количество посетителей на сайте и рекорды посещаемости.
Рекорд посещаемости - количество посетителей на линии в единицу времени,
на стандартных форумах этот показатель измеряется один раз в минуту.

Так вот, на серверах lite-host, где стоит ограничитель в 48 соединений,
рекорд посещаемости сайта мог бы выглядеть примерно так




"Жалкое зрелище, душераздирающее зрелище..."

Второй пример - на форуме в момент замера присутствует 821 посетитель, рекорд = 1014 посетителей




Второй сайт расположен на самом обычном сервере в самом обычном ДЦ Москва,
этот сервер тестировался под нагрузкой в 20 000 соединений ...




Любознательные читатели вправе задать вопрос, а что будет,
если нужно гарантированно обслуживать сайт такого масштаба:




на форуме в момент замера присутствует 1705 посетителей, рекорд = 25392 посетителя

Не вопрос - результаты тестирования на том же самом обычном сервере в самом обычном ДЦ Москва,
этот сервер тестировался и под нагрузкой в 50 000 соединений ...




К вышеизложенному можно добавить только высказывания двух специалистов,
которые занимаются вопросами сертификации хостинга в двух известных и крупных компаниях:

2.1 - 1С-Битрикс: Александр Демидов

Цитата
По тестам мы учитываем ту конфигурацию, которую клиент получает сразу же, заказав услугу у хостера.

Наш комментарий - мы тестируем только то, что выдает хостер, именно в том состоянии и при тех настройках,
которые установлены хостером.
Подробную методику нашего тестирования мы излагали на специализированном форуме,
в разделе для хостинг-партнеров 1С-Битрикс, можно еще добавить,
что за последние 4 года методика нашего тестирования абсолютно не поменялась,
и она абсолютно одинакова для всех, независимо от сервера хостинга либо тарифного плана ...

2.2 - Юмисофт: Константин Смыгин

Цитата
Хостинг должен показывать хорошие результаты работы под нагрузкой, при количестве параллельных запросов от 150 до 500 запросов

Наш комментарий - именно поэтому мы тестируем сервера хостинга многопоточным тестом,
это показывает способность сервера держать соединения, генерировать страницы и отдавать их пользователям ...

Что еще можно добавить к уже сказанному ?
Все наши примеры работ с сайтами клиентов, которые обращались к нам в поисках причин низкой скорости работы сайта,
малой посещаемости и плохой индексации поисковыми системами мы уже демонстрировали нашим читателям,
можно только еще раз кратко повторить наше портфолио:

3.1 - Опыт работы с большими сайтами клиентов (100 Gb)
3.2 - Опыт работы с большими базами клиентов ( 7 Gb)
3.3 - Опыт работы с большими входящими нагрузками (более 25000 соединений)
3.4 - Наша лаборатория имеет в своем штате квалифицированных специалистов,
которые получили в общей сложности 20 сертификатов
3.5 - Автор этой публикации имеет личный сертификат специалиста - системного администратора,
выданный компанией Айдеко, совместно с журналом Хакер, цитатником Рунета bash.org.ru, цифровым
порталом iXBT и сообществом Habrahabr.ru на конкурсе-турнире на звание "Системный Администратор 2010"
3.6 - Автор этой публикации имеет 6 личных сертификатов специалиста - по курсу хостинга, выданных компанией 1С-Битрикс
3.7 - Наш коллектив принимал участие в далеком уже 2009 году в Деcятом Всероссийском Открытом Интернет-Конкурсе
"Золотой сайт 2009-2010", в категории = Лучший сайт на "1С-Битрикс"

Еще один хостер прислал письмо с приглашением протестировать свой хостинг и мы решили показать на примере
3-х хостеров, которые обращались к нам за последние 3 недели, различный подход к понятиям надежности и производительности.

Для объективной оценки нескольких факторов, воспользуемся модифицированной формулой расчета позиций в рейтинге,
обычно применяемой сотрудниками 1С-Битрикс :

Код
N = ((P * Q)/ Z) * S где N - Суммарный балл ( вес позиции в рейтинге, чем больше => тем лучше ) P - Значение индекса производительности из "монитора производительности" Q - Количество обрабатываемых за одну секунду страниц при запросе в несколько потоков S - Количество соединений, обрабатываемых за одну секунду без ошибок при запросе в несколько потоков Z - Цена тарифного плана в месяц

Итак - в этом импровизированном соревновании приняли участие 3 хостинга.
Для приведения формулы расчета к единому знаменателю,
примем условную стоимость тарифного плана единой в размере 310 рублей в месяц.

Наши участники:
lite-host.in
Тарифный план - 900 рублей в месяц
radiushost.ru
Тарифный план - бесплатно
ihc.ru
Тарифный план - 310 рублей в месяц

Для наглядности показываем наиболее характерные в плане надежности и производительности
данные графиков многопоточного теста у каждого хостера,
это показывает способность держать соединения, генерировать страницы и отдавать их пользователям ...

Первым посчитаем результат хостинга lite-host.in




P = 21.79
Q = 10.67
Z = 310 (тариф 900 рублей)
S = 48 (ограничитель хостинга)

Суммарный балл = 35,99

Вторым посчитаем результат хостинга radiushost.ru




P = 17.72
Q = 137.67
Z = 310 (бесплатный тариф)
S = 250

Суммарный балл = 1967,34

Третьим посчитаем результат хостинга ihc.ru




P = 31.53
Q = 123.67
Z = 310
S = 4500

Суммарный балл = 56602,96

Таким образом, в нашем импровизированном соревновании победил хостинг компании ihc.ru,
второе место занял бесплатный хостинг,
по поводу качества хостинга за 900 рублей наши читатели выводы могут сделать сами ...

Показываем копии экранов замера Победителя:

Запуск в панели производительности теста скорости




В завершение - запускаем команду определения конфигурации сервера




Информация о хостере

Код
Местоположение   - Москва Начало работы    - Апрель 2007 Клиентская база  - 61800 доменов Ссылок в Яндексе - 91000 Тарифный план    - 310 рублей в месяц

Еще один из читателей этой темы прислал письмо с просьбой протестировать хостинг




заходим на сайт хостинга и выбираем самый дорогой тарифный план Битрикс: Бизнес

Запускаем тест производительности, полученные результаты на уровне показателей бесплатного хостинга




Сервер не набрал даже 30 баллов, то есть норматив 2008 года для серверов "младших классов VDS-256" не сдан ...

Запускаем многопоточный тест на способность держать соединения, генерировать страницы и отдавать их пользователям ...




С нагрузкой в 1250 соединений сервер еще справляется, но далее начинают сыпаться ошибки ...

Запускаем диагностику, чтобы найти причину такой низкой производительности сервера,
и тут все сразу становится на свои места ...




Хотелось бы обратить внимание наших читателей на три момента:

1.1 - Это самый обычный маломощный VDS, Hypervisor KVM, BIOS Bochs
На текущий момент в нашей базе данных хранится информация о 404 протестированных нами серверов хостинга,
и всего только 6 серверов используют BIOS Bochs.

1.2 - Производительность памяти
быстродействие памяти всего 6 Gbps
против показателей лидеров рейтинга 17 Gbps
проигрыш в скорости в 2.8 раз !!!

1.3 - Производительность дисковой системы
скорость записи на диск всего 88 Mbps
против показателей лидеров рейтинга 376 Mbps
проигрыш в скорости в 4.2 раз !!!

Выводы наши уважаемые читатели пусть сделают сами ...

Информация о хостере

Код
Местоположение   - Петербург Начало работы    - Май 2012 Клиентская база  - 110 доменов Ссылок в Яндексе - 180 Тарифный план    - 700 рублей в месяц

Как уже бывало несколько раз, хостер, чей сервер тестили прошлый раз,
остался недоволен результатами тестирования своего тарифного плана
стоимостью 1200 рублей в месяц.

Приведем некоторые моменты его высказываний:

Цитата

Процессор - в порядке, даже если брать Ваш тест, Файловая система - по Вашему тесту в порядке, База данных по Вашему тесту - вообще летает. И 9 баллов, Отлично! ))) На скриншоте явно видно процессор: AMD Opteron 4386 ... но у Вас не вызвало подозрение 1 ядро? Ладно, перейдем к оперативной памяти, если производительность и объем 128 GB DDR3 ECC 1066MHz ... не могу даже представить какая машина должна быть чтобы хотя бы 30 баллов набрать ...

Попробуем ответить фактами и аргументами на это эмоциональное выступление ...

Включаем базу данных с нашим архивом результатов тестирования серверов хостинга и выбираем первого попавшегося
реального малобюджетного хостера, почти по принципу русской рулетки ...

Читая карточку клиента, видим, что в нашу базу данных он попал 4 года назад,
когда в апреле 2010 года предлагал малобюджетные сервера с такой конфигурацией:

Код
Intel Atom 230 Процессор = 1.6 ГГц ОЗУ       = 2 ГБ Диск     = 160 ГБ SATA Трафик    = 2000 ГБ Порт      = 10 Мбит/сек IP адреса = 6 Установка = бесплатно Стоимость = 1990 рублей в месяц

Заходим на сайт хостера, где нас встречают, как хорошего знакомого,
выбираем самый дешевый тарифный план с локацией Россия.

Моментально приходят данные доступа, заходим в панель хостинга,
обнаруживаем ограничения тарифного плана, поэтому устанавливаем Lite-версию тестового сайта.

Установка проходит без каких-либо проблем,
заходим в монитор производительности и моментально получаем более 50 баллов ...




Запускаем многопоточный тест, как видно на копии экрана,
с нагрузкой в 2500 соединений сервер справляется без единой ошибки.




В завершение, делаем попытку определить конфигурацию сервера:




Остальные выводы наши уважаемые читатели могут сделать сами ...

Информация о хостере:

Код
Головной офис     - Нидерланды Юридический адрес - Нижний Новгород Тестируемый ДЦ    - Химки Начало работы     - Август 2006 Клиентская база   - 482 доменов Ссылок в Яндексе  - 3000 Тарифный план     - 33 рубля в месяц

22 мая был запущен в опытную эксплуатацию государственный интернет-поисковик Спутник.

Попробуем посмотреть, как это отразилось на посещаемости сайтов,
на примере анализа статистики одного из сайтов клиентов за период 10 дней.

Заходим в панель управления хостинга и смотрим на статистику:




Видим, что данный клиент пользуется услугами хостинга 4 года ...

Заходим в статистику за май месяц:




Видим, что за прошлый месяц сайт клиента посетило 111 поисковых роботов.
Ищем в списке поисковый робот Спутник, сразу его находим,
он на втором месте после Яндекса, за прошлый период данный поисковый робот совершил 35000 запросов,
было скачено 787 Мб информации с сайта клиента.

Затем заходим в статистику переходов с поисковых систем:




Видим, что за прошлый месяц посетители переходили на сайт клиента из 48 поисковых систем.
58 % поискового трафика поступило из поисковой системы Яндекс.
Поисковая система Спутник на данном экране статистики занимает 8 место,
после поисковика Microsoft Bing.
Всего было зарегистрировано 52 перехода.

Такое небольшое количество объясняется только тем, что поисковик Спутник
абсолютно новый и пока незнаком широким слоям населения русской части Интернета.

В заключение, проверяем пинги до новой поисковой системы,
изучая параметры технического паспорта сервера хостинга.




В момент проведения замера пинг до Яндекса 2.2 мс, пинг до Спутника 4.4 мс.

Приглашаем читателей, у которых более богатая статистика, чем в приведенном примере,
поделится выкладками своей статистики в этой теме.

Недавно один очень известный, богатый, знаменитый, московский хостер прислал нам письмо
с предложением протестировать новые тарифные планы.

Так как мы этого хостера знаем очень давно, мы с недоверием отнеслись к этому письму,
хотя от таких предложений не отказываются.

Заходим на сайт хостера, начинаем изучать рекламные тексты ...

Выбираем тарифный план, который по описанию более всего подходит
под профессиональный, взрослый, почти настоящий сервер,
однако нас одолевают смутные сомнения ...

Слишком хороший рекламный текст, чтобы быть правдой ...
Наши опасения подтвердились ...

Запускаем стандартный тест производительности:




Сервер даже не набирает нормативные 30 баллов ...

Далее - запускаем многопоточный тест под нагрузкой в 5000 соединений,
с этим тестом, как видно на копии экрана, данный сервер справляется без единой ошибки.




Запускаем полную диагностику сервера хостинга,
чтобы найти причины низкой производительности, и находим их !!!




Описываем более подробно пункты технического паспорта сервера хостинга,
обращая внимание наших читателей на особо важные критические моменты,
влияющие на реальную производительность сайтов клиентов на любом хостинге ...

1 - Несмотря на то, что хостер формально выбрал серверную плату Supermicro,
фактически он выбрал практически самую дешевую плату X9SCL формата microATX




2 - Процессор работает всего на 50 % своей мощности ...

3 - Выбор мало-бюджетной материнской платы моментально отразился на производительности памяти !!!
Именно поэтому быстродействие памяти всего 13 Gbps
против показателей лидеров рейтинга 17 Gbps
проигрыш в скорости почти 30 % !!!




4 - Дисковая система - используются обычные бытовые диски для домашних компьютеров !!!
Кроме этого, выбор мало-бюджетной материнской платы моментально отразился и на производительности дискового интерфейса !!!
Диск вынужден работать на пониженной скорости передачи данных 3 Gbps
( наш комментарий - на скорости интерфейса 6 Gbps (SATA-III ports) работают всего 53 сервера хостинга )

Именно поэтому итоговая скорость записи на диск всего 102 Mbps
против показателей лидеров рейтинга 376 Mbps
проигрыш в скорости почти в 3.6 раз !!!

Любые попытки экономии на качестве комплектующих моментально сказываются
на итоговых цифрах производительности и прекрасно выявляются при тестировании !!!

После окончания тестирования нам позвонил руководитель этой
очень известной, богатой, знаменитой, московской хостинговой компании.
В телефонном разговоре наши сотрудники указали на узкие места, влияющие на производительность,
он полностью согласился с результатами нашего тестирования ...

Информация о хостере:

Код
Юридический адрес - Москва Тестируемый ДЦ    - Коровинское шоссе Начало работы     - Ноябрь 2003 Ссылок в Яндексе  - 14000 Тарифный план     - Premium

P.S.
Приведенный выше пример анализа узких мест в сервере хостинга еще раз доказывает,
что разработчики комплексного тестового пакета для хостинга
используют правильные методики, которые позволяют однозначно выявить причину низкой скорости работы сайта
у любого клиента хостинга, при любом внешнем окружении, при любом ограничении в правах пользователя ...

На сегодня , в нашей базе данных хранятся 711 результатов замеров 412 серверов хостинга,
из 19 стран мира, Россия представлена 14 городами.
Пока ни один из хостеров, включая противников какого-либо тестирования и замеров параметров хостингов,
не смог опровергнуть полученные результаты , как в части определения реальной конфигураций серверов,
так и в части замера производительности ...

Настоящему хостеру никакое тестирование не страшно,
на нормальной конфигурации сервер моментально набирает необходимые баллы.
Владельцы же псевдо-хостингов на своих микро-бюджетных серверах практически всегда против тестирования,
им очень не хочется, чтобы общественность узнала истину, из чего собираются их мега-супер-быстрые как-бы сервера ...

На любые тщетные попытки оппонентов обвинить нас в неправильной работе нашего тестового комплекса
знайте = у нас есть 711 готовых ответов, на любой вкус и цвет, в картинках и цифрах,
с логами наших тестеров и IP адресами серверов ...
Диапазон тарифных планов = от 5 рублей до 96 тысяч рублей.

С уважением, пресс-служба тестовой лаборатории "Разрушители Мифов о хостинге"