27.07.05

DNS-трафик пользователей хостинг-провайдеров

Из определения хостинга следует, что хостин-провайдер размещает у себя чужие информационные ресурсы и предоставляет доступ к ним из Интернета. Каждый информационный ресурс имеет свое собственное доменное имя. Нас интересуют только те доменные имена, которые расположены в зоне RU. Пользователи этих ресурсов обращаются к ним, указывая в своих запросах доменные имена сайтов, адреса электронной почты и т.п.

С точки зрения технологии это означает, что при каждом обращении пользователя к сайту или при отправлении письма по электронной почте, происходит обращение к системе DNS. Запросы каждого пользователя Интернета обслуживает один или несколько кэширующих серверов доменных имен. Собственно, эти серверы и выполняют поиск соответствия между доменным именем и IP-адресом, необходимым пользователю для установления соединения с требуемым ему информационным ресурсом.

Сам поиск соответствия представляет собой последовательность обращений к серверам доменных имен, начиная с корневых серверов и заканчивая авторитативными серверами домена, т.е. серверами хостинг-провайдера. В промежутке между обращением к корневому серверу и обращением к авторитативному серверу искомого домена происходит обращение к серверам, поддерживающим зону российского домена RU.

На самом деле не каждый запрос пользователя к информационному ресурсу порождает весь цикл опроса серверов доменных имен. Кэширующий сервер потому и называется "кэширующим", что умеет "помнить" некоторое время предыдущие запросы пользователя. Если приходит запрос, на который у кэширующего сервера уже есть ответ, то сервер не опрашивает другие серверы, а просто отвечает сам.

Время, на которое кэширующий сервер запоминает соответствия между доменным именем и IP-адресом, называется "временем жизни записи описания ресурса" или TTL (Resource Record Time To Live). Оно устанавливается техническим администратором домена, в котором расположен искомый информационный ресурс.

На 1 июля 2005 года зону домена RU поддерживали 8 серверов доменных имен, 4 из которых находились под управлением РосНИИРОС. Проведенные весной 2005 года исследования нагрузок на эти серверы показали, что 90% всех запросов, направленных через различные кэширующие серверы российского сегмента Интернета, обслуживаются серверами РосНИИРОС.

В рамках вышеупомянутых исследований были проанализированы запросы, которые обрабатывают авторитативные серверы зоны RU за сутки (26-27 апреля 2005 года). При этом обращалось внимание на два момента:

- число запросов к домену;

- число автономных систем, из которых опрашивался домен.

Первый параметр показывает популярность домена, хотя понятно, что для доменов с различными TTL записей описания ресурсов, мы заведомо получим различную частоту обращения, но, тем не менее, качественные оценки сделать можно.

Второй параметр характеризует широту аудитории домена, потому что каждый крупный ISP - это фактически одна или несколько автономных систем (об распределении адресного пространства и автономных системах более подробно читайте в первом выпуске нашего бюллетеня).

Таблица 5. Активность пользователей автономных систем (26-27 апреля 2005 года)

Имя AS

Номер AS

Число доменов, опрошенных из AS

Число корректных запросов к серверам зоны RU

SOVAM-AS

AS3216

187353

2913904

RAMBLER-TELECOM-AS

AS24638

157644

592104

MTUONLINE

AS8359

157266

1698440

RTCOMM-AS

AS8342

133289

2786525

CORBINA-AS

AS8402

89375

975906

TRANSTELECOM

AS20485

89075

1098823

COMCOR-AS

AS8732

88642

845909

MAcomnet

AS8470

86777

731507

COMBELLGA-AS

AS8350

75869

559874

PETERSTAR-AS

AS20632

73290

564359

CNT-AS

AS8615

70755

498948

WEBPLUS-AS

AS6690

66566

512847

COMSTAR-AS

AS6731

65323

392867

RMT

AS5523

63373

358311

CARAVAN

AS15756

62669

323805

CompTek-Yandex

AS13238

61605

252830

DINET-AS

AS12695

55189

257115

COMCORTV-AS

AS15582

50196

210362

RINET-AS

AS8331

49673

242019

STC-AS

AS25490

49645

313664

В таблице 5 приведены наиболее "активные" автономные системы. Как хорошо видно, они совпадают с наиболее крупными российскими ISP.

Таблица 6. Домены, которые посещают пользователи 700 и более российских автономных систем

Домен

Число AS

Примечание

COM.RU

759

Общий

HOTLOG.RU

759

Счетчик

NET.RU

752

Общий

RAMBLER.RU

751

Счетчик, поиск, почта

ADRIVER.RU

751

Реклама

BANNERBANK.RU

749

Реклама

YADRO.RU

747

Счетчик

TOPCTO.RU

745

Счетчик

LIST.RU

745

Счетчик, каталог

TBN.RU

742

Реклама

NAROD.RU

738

Хостинг

POCHTA.RU

737

Почта

LBN.RU

736

Реклама

PP.RU

735

Общий

APORT.RU

734

Поиск

CLX.RU

734

Реклама

IMHO.RU

734

Реклама

DNI.RU

733

СМИ

ORG.RU

731

Общий

SJ7.RU

731

Реклама

SJ3.RU

731

Реклама

RFN.RU

731

ВГТРК

SJ2.RU

729

Реклама

MASTERHOST.RU

729

Хостинг

ADNET.RU

729

Реклама

SJ4.RU

728

Реклама

OO.RU

726

Портал

IZVESTIA.RU

726

СМИ

DESIGN.RU

724

Студия Лебедева

RBCMEDIA.RU

723

СМИ

FARK.RU

722

СМИ

ONE.RU

721

Хостинг

LINKEXCHANGE.RU

721

Реклама

REGNUM.RU

721

сми

CENTRE.RU

720

Студия

SPORT-EXPRESS.RU

720

СМИ

OZON.RU

720

Магазин

SJ8.RU

717

Реклама

RIAN.RU

717

РИА "НОВОСТИ"

MN1.RU

715

Реклама

SJ1.RU

715

Реклама

USERS.RU

715

Хостинг

AVA.RU

715

Портал

SUBSCRIBE.RU

714

Рассылки

RLE.RU

714

Реклама

MAIL.RU

713

Почта

ROL.RU

710

Портал (Golden Telecom)

UTRO.RU

710

СМИ

SJ6.RU

709

Реклама

MBE.RU

709

Реклама

PRBN.RU

709

Портал

WWWOMEN.RU

708

Женский портал

MN3.RU

707

Реклама

NEWMAIL.RU

706

Почта

HOSTER.RU

704

Хостинг

RBC.RU

704

СМИ

MTU.RU

704

Почта и NS-ы

BY.RU

703

Хостинг

PLUS.RU

703

Хостинг

VALUEHOST.RU

703

Хостинг

SJ9. RU

702

Реклама

AGAVA.RU

702

Хостинг

NEWHOST.RU

701

Хостинг

В таблице 6 представлены только те домены, которые посещают пользователи 700 и более российских автономных систем. Фактически это домены, которые обеспечивают наиболее полный территориальный охват российской аудитории. Не случайно, что в этом списке можно найти практически все наиболее популярные домены.

В рамках данного выпуска бюллетеня мы рассмотрим только те результаты этих исследований, которые относятся к хостинг-провайдерам, а точнее только к тем, кто возглавляет список топ-200 проекта stat.nic.ru.

MASTERHOST

Время кэширования записей домена masterhost.ru составляет 15 минут. Это касается и адресных записей, и записей описания почтовых шлюзов, и записей описания серверов доменных имен.

Домен Masterhost - один из самых популярных в Рунете. Его запрашивали пользователи 729 российских автономных систем. По этому показателю он занял 11-е место среди всех российских доменов.

За сутки наиболее часто пользователи Рунета спрашивали следующие доменные имена:

Таблица 7. Наиболее популярные запросы к домену masterhost.ru. (26-27 апреля 2005 года)

+-----------------------------+------------+
| имя домена | кол-во |
| | запросов |
+-----------------------------+------------+
| masterhost.ru | 24936 |
| pop.masterhost.ru | 18017 |
| ns4.masterhost.ru | 17824 |
| ns5.masterhost.ru | 16769 |
| mx1.masterhost.ru | 12706 |
| mx2.masterhost.ru | 10516 |
| mx3.masterhost.ru | 10212 |
| ns.masterhost.ru | 3840 |
+-----------------------------+------------+

Из этого списка понятно, что, во-первых, домены разнесены по двум группам серверов доменных имен. Наиболее популярные ресурсы поддерживаются парой ns4.masterhost.ru - ns5.masterhost.ru. Во-вторых, частота обращений к услугам электронной почты, предоставляемым в домене masterhost, сопоставима с частотой обращений к доменам, поддерживаемым серверами ns4.masterhost.ru и ns5.masterhost.ru (возможно, что это "отголоски" спама). В-третьих, частота обращений к электронной почте сравнима с частотой показа рекламных баннеров самого Masterhost на своих площадках.

VALUEHOST

Время кэширования записей домена valuehost.ru составляет 30 минут. Адресные записи почтовых шлюзов кэшируются на час, однако сами MX записи кэшируются только на полчаса.

Адресные записи из домена valuehost.ru. за исследуемый период запросили пользователи 703 российских автономных систем (60 место среди всех российских доменов), что является очень высоким показателем.

Таблица 8. Наиболее популярные запросы к домену valuehost.ru (26-27 апреля 2004 года)

+-----------------------+------------+
| имя домена | кол-во |
| | запросов |
+-----------------------+------------+
| mail.valuehost.ru | 15538 |
| relay.valuehost.ru | 8050 |
| mxs.valuehost.ru | 7027 |
| priceexp.valuehost.ru | 2830 |
| mxs2.valuehost.ru | 2785 |
| ns1.valuehost.ru | 2607 |
| ns2.valuehost.ru | 2191 |
+-----------------------+------------+

Частота обращений к ресурсам самого Valuehost сравнима с частотой обращений к ресурсам Masterhost - время кэширования в два раза больше, частота в два раза меньше. Лидирует по числу обращений (как и в случае с Masterhost) электронная почта.

По числу обращений к серверам доменных имен, которые поддерживают в том числе и домены клиентов, Valuehost уступает первой группе серверов Masterhost (ns4.masterhost.ru., ns5.masterhost.ru.). Но он вполне сопоставим со второй группой серверов (ns.masterhost.ru, ns1.masterhost.ru, ns2, masterhost.ru) Masterhost, а если учесть время кэширования, то даже и более популярен.

RBC

Оценивать хостинг RBC по статистике обращений к самому домену сложно, т.к. в нем находятся все основные информационные ресурсы холдинга. По охвату российских автономных систем домен rbc.ru занимает 56 место (704 автономные системы). Любопытно, что utro.ru (710), pochta.ru (737), rbcmedia.ru (723) охватывали на момент исследования большее число автономных систем, чем rbc.ru.

Время кэширования соответствия между между именем rbc.ru и IP-адресом равно одной минуте (Round Robin алгоритм перераспределяет нагрузку). Однако время кэширования записи сервера доменных имен равно одному часу, поэтому на авторитативные серверы зоны RU запросы с одного и того же кэширующего сервера доменных имен должны приходить не раньше, чем один раз за час.

Таблица 9. Наиболее популярные запросы к домену rbc.ru (26-27 апреля 2004 года)

+-------------------------+------------+
| имя домена | кол-во |
| | запросов |
+-------------------------+------------+
| pics.rbc.ru | 9314 |
| www.rbc.ru | 5364 |
| xns1.rbc.ru | 3917 |
| xns2.rbc.ru | 3440 |
| top.rbc.ru | 3139 |
| ns2.rbc.ru | 1733 |
| ns3.rbc.ru | 1677 |
| count.rbc.ru | 1301 |
| redir.rbc.ru | 922 |
| rbc.ru | 573 |
| banner.rbc.ru | 451 |
| webhosting-mail2.rbc.ru | 220 |
+-------------------------+------------+

Как видно из таблицы, частота обращений к домену RBC сравнима с частотой обращений к доменам "чистых" провайдеров. С точки зрения хостинга нас интересует только частота обращений к серверам доменных имен xns1.rbc.ru и xns2.rbc.ru. Эта частота существенно (с учетом времени кэширования) выше, чем частота обращений к серверам Valuehost и сравнима с частотой "элитных" серверов Masterhost.

MTW

Сравнивать показатели mtw.ru и других хостинг-провайдеров не очень корректно, т.к. время кэширования для этого домена равно 12 часам. Но если учесть, что большинство доменов, поддерживаемых любым хостинг-провайдером, не относится к категории высокопосещаемых, то с некоторой натяжкой мы попробуем их сравнить, тем более что охват российских автономных систем у MTW уступает рассмотренным выше доменам - 609 автономных систем.

Таблица 10. Наиболее популярные запросы к домену mtw.ru (26-27 апреля 2004 года)

+-----------------+------------+
| имя домена | кол-во |
| | запросов |
+-----------------+------------+
| pochta.mtw.ru | 1634 |
| ns.mtw.ru | 1413 |
| ns1.mtw.ru | 1161 |
| www.beta.mtw.ru | 987 |
| pop.mtw.ru | 338 |
| mtw.ru | 233 |
| www.mtw.ru | 200 |
| mail4.mtw.ru | 192 |
| win2000.mtw.ru | 175 |
| cnt.mtw.ru | 152 |
| mail75.mtw.ru | 117 |
| counter.mtw.ru | 116 |
| ns2.mtw.ru | 103 |
+-----------------+------------+

Мы видим типичную картину. Доминирует электронная почта, а частота обращений к серверам доменных имен на уровне других хостинг-провайдеров, уже рассмотренных нами.

INFOBOX

Серверы доменных имен этого провайдера (согласно данным stat.nic.ru) имели на момент проведения исследования доменные имена в зоне ORG, а не в зоне RU. Тем не менее, по числу обращений этот домен занимает одно из первых мест среди всех российских доменов (7 место, уступая только счетчикам и рекламным площадкам). По охвату автономных систем (668) немного не дотягивает до лидера Masterhost и почти совпадает с Valuehost.

Время кэширования записей описания ресурсов данного домена составляло 10 минут. А двух из 5 почтовых шлюзов - 1 час.

Таблица 11. Наиболее популярные запросы к домену infobox.ru (26-27 апреля 2004 года)

+------------------------------+------------+
| name | n_requests |
+------------------------------+------------+
| smtp.infobox.ru | 84817 |
| mx05.infobox.ru | 35877 |
| mx03.infobox.ru | 34048 |
| mx04.infobox.ru | 32917 |
| mail.infobox.ru | 9743 |
| mx01.infobox.ru | 9357 |
| mx02.infobox.ru | 8418 |
| www.infobox.ru | 8124 |
| ukrbanner.infobox.ru | 1988 |
| relay03.infobox.ru | 1576 |
| infobox.ru | 840 |
| relay02.infobox.ru | 795 |
| relay01.infobox.ru | 780 |
| 195.208.234.26.ip.infobox.ru | 255 |
| www.mail.infobox.ru | 221 |
| dl.infobox.ru | 208 |
| pilot.infobox.ru | 178 |
| www.nevskoe.infobox.ru | 172 |
| gato154.infobox.ru | 143 |
| monah.infobox.ru | 134 |
| www.hrdhdrhrdh.infobox.ru | 102 |
+------------------------------+------------+

Как видно из приведенной таблицы, число обращений к smpt серверу (сервер почтового транспортного агента) на порядок больше, чем число обращений к "часовым" почтовым шлюзам, что вполне можно отнести на время кэширования адресных записей последних.

Доминируют среди обращений к домену infobox.ru обращения к сервису электронной почты, что неудивительно. Даже с поправкой на время кэширования соответствующих записей описания ресурсов цифры infobox впечатляют.

Самое любопытное, что у Infobox нет бесплатной почты, т.е. вся почтовая активность так или иначе оплачивается. Для сравнения аналогичная по настройкам DNS бесплатная почта от RBC - pochta.ru (самый популярный по числу обращений "почтовый" домен) обладает следующими характеристиками:

- по числу обращений к домену pochta.ru занимает 10 место, уступая infobox.ru;

- пo охвату автономных систем pochta.ru занимает 12 место (737 AS), опережая infobox.ru.

Правда, такое сравнение не совсем корректно, т.к. получить бесплатный почтовый ящик в RBC можно и на других доменах. С другой стороны, и почта Infobox может предлагаться в пакете услуг хостинга для поддерживаемых в Infobox доменов клиентов.