Экскурсия в дата-центр MSM

После моих фото-репортажей, мне предложили сходить в гости в дата-центр компании МСМ, где у меня лежит арендованный сервер. Предложил это дело Владимир Лапшин. Естественно, я не мог отказаться, т.к. никогда не был в дата центре внутри.

Подготовился к съемке я, правда, херово, поэтому фотографии будут средней поршивости. Но зато много интересного расскажу про МСМ.

Так, дата-центр на ВДНХ – это экспериментальный проект, спроектированный и сделанный целиком в стенах МСМ. Он небольшой, всего 40 стоек, и у него уровень TIER 2+. Этот эксперимент делался для того, чтобы научиться, как правильно строить дата-центры. И сейчас МСМ строит новый, самый большой в России, дата-центр на 2000 стоек. Это больше, чем на М9 и у стак-нета. Новый дата центры будет иметь TIER 4+.

Всего 2 ряда стоек. Внизу из щелей идет холодный воздух с хорошим напором, чтобы доходить до серверов на самом верху стоек. От потолка он отражается и внутри этого коридора очень холодно и избыточное давление.

Коммутатор, который раздаёт интернет на все стойки.

Это рейд-массив (рейд 5) в 12 терабайт, где хранятся все логи и дампы из этого дата-центра. Еще у мсм 100 стоек на м9. Если у вас 2 сервера у мсм в разных дата-центрах, то трафик между ними не считается.

Огромный черный шкаф – это мега-упс, который может держать весь дата-центр в течении 15-20 минут. Так же в подвале стоит дизель-генератор на всякий случай.

Красные баллоны – это газ (углекислый, вроде) под давлением. Если что-то загорается в дата-центре, то газ выпускается и замещает собой весь кислород. Соответственно огонь тушится, но всё оборудование при этом остаётся невредимым.

Вот так выглядит этот мега-упс внутри.

Еще баллоны, уже подключенные в систему.

Датчики дыма и огня стоят над каждой стойкой. Но, на всякий случай, еще и 24/7/365 сидит специальный человек, ответственный за противопожарную охрану.

Это щиток, который контролирует электричество. В этот дата-центр входит 2 электрических независимых канала. Каждый из которых может полностью обеспечить электро-снабжением весь дата-центр. Ну и в качестве резерва упс и дизель-генератор.

Щиток, который раздаёт электричество на каждую стойку. В прямом эфире показывает, сколько ампер каждая стойка жрет.

Система охлаждения. Воздух очень неплохо очищается фильтрами и охлаждается. Таких установок всего 3 – в начале, по середине и в конце дата-центра. Любые две могут обеспечивать полное охлаждение всех 40 стоек. Соответственно всё сделано с избытком.

Современные технологии даже в офисе – двери открываются от отпечатков пальцев.

Еще в этот дата-центр проложен 10ти гигабитный канала в интернет и два резервных по 1 гигабиту. При этом у канала свободна полоса в 6 гигабит.

У МСМа очень много известных клиентов. Так, несколько стоек в дата-центре на ВДНХ, полностью заклеены наклейками одного очень известного южнокорейского гиганта. Там хранятся все их сервера.

Все сервера, которые МСМ сдаёт в аренду сейчас – это сервера IBM. Раньше у них были еще и HP, но от них пришлось отказаться, т.к. были проблемы с драйверами на линухах, отличных от Red Hat’а. Самосборных серверов МСМ не сдаёт в аренду. И еще – на сайте есть стандартные конфигурации серверов, но это совершенно не значит, что нет других. С менеджерами всегда можно договориться и заказать именно тут конфигурацию, что нужно.

Экскурсию проводил Мирон Рудник, главный инженер компании.

Так же ребята любезно согласились пригласить нас (меня и Антона Белицкого, у него тоже есть фотографии) в новый дата-центр, как только там будет на что смотреть. Сейчас там только залит фундамент.

Еще рассказали, что в новом дата-центре будет мелкомягкая технология cloud computiong на сколько я понял. Т.е. огромное количество серверов будет объединено в единое пространство и клиент сможет заказывать любой кусок от этого пространство с возможностью неограниченного расширения. Жалко, что технология только под виндой – спрос будет маленький. Это сильно круче, чем VPS и VDS. Под *nix ничего подобного пока нет, но должно появится.

Так же компания МСМ может помочь сделать систему любой сложности в их дата-центрах, как например системы балансировки нагрузки на сервера, отдельные сервера под БД и т.д. и т.п. Еще они могут помочь бороться с ДДОС и вообще сделать всё, что захочется клиенту за его деньги :). Кроме одного – они принципиально не занимаются “администрированием” серверов на уровне софта (настройка апача/мускуля и т.д.).

Было очень интересно и я понял, что не зря арендовал сервер именно у них. Он, кстати, работает там уже полтора года как часы. Единственное, пришлось его перезагружать несколько раз из-за того, что обновлял ядро.

***

Спонсорская ссылка – недвижимость в газете из рук в руки.

***

Сервер оплачивается из доходов с mainlink, loadmovie, bigpays, adlabs, smartbucks, linkfeed, fotocash, liex, profit-project, moviecash, kino77 и конечно-то же sape

В закладки!

Экскурсия в дата-центр MSM: 10 комментариев

  1. 40 стоек, бугага! Это не рентабельно. Но построено не плохо, особенно в сравнении с остальными российскими ДЦ

  2. Ну так гвоорюж, они это для эксперимента построили, чтобы понять как правильно строить. И теперь строят на 2000 стоек.

  3. У конторы на странице про Colocation заявлен сервер «Pentium 4 2,4Gh, 512Gb RAM, 80 SATA». На какой, интересно, у них платформе 512 Гигов памяти уместилось? :)

  4. Я, оказывается, и сам много не знал. :)

    Kosyan, в этом же здании находится офис компании, так что все очень удобно. Хорошие каналы в любом случае были нужны для собственного оборудования, так что все вполне рентабельно.

    sk36, МСМ занимается размещением и сдачей в аренду серверов уже довольно давно, инженером я там работал лет 8 назад, никакого офиса и датацентра на ВДНХ тогда не было, но сервера на ММТС-9 были. В том числе и самосбор из обычных десктоповых комплектующих. Кому-то важна надежность, а кому-то цена и скорость ввода в эксплуатацию. ;) Тогда сервера у Депо надо было заказывать за 2 недели: пока соберут, пока протестируют. А самостоятельно собрать, настроить и потестировать сервер можно было за день.

    Сейчас-то такого уже нет, но старое железо осталось и исправно работает. Зато стоит недорого, а в любом случае будет ощутимо надежнее и шустрее любого VDS.

    У Гугла, насколько я знаю, тоже масса древнего железа работает, и ничего. :)

  5. Да, с карточками я лоханулся :). Ну ниче, в новом дата-центре исправлюсь :)

    А по поводу 512 гигов оперативы — опечатка скорее всего.

  6. «24/7/365 сидит специальный человек», наверное, к шкафчику с пивом отошёл. Или съёмка проводилась 29 февраля. :-)

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *

Можно использовать следующие HTML-теги и атрибуты: <a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code> <del datetime=""> <em> <i> <q cite=""> <strike> <strong>