В продолжение Части 1 — Colocation
В продолжение Части 2 — Гермозона
В продолжение Части 3 — Переезд
Здравствуйте! Постарались выполнить обещание и рассказать о финансовой стороне вопроса. Хочу сразу сказать, коммерческую информацию раскрывать мы не можем, однако «обрисовать» все в общих чертах — совершенно не видим проблем. В этой статье мы постараемся затронуть тему ценообразований услуг, из чего оно состоит и что на него влияет, дабы все смогли заглянуть на «кухню» хостинг-провайдера. Мы расскажем сколько стоят серверы, какие основные проблемы в их эксплуатации и как же формируется цена на услуги, с учетом необходимой прибыли.
Сначала поговорим о дата-центре. Было очень много вопросов, например: Откуда средства? Сколько потратили? Привлекали ли инвестиции? Рентабельно ли? Постараемся ответить на эти вопросы. Свою работу мы начали с ноября 2015 года, и за этот месяц заработали всего 36 долларов. Не много, но для новичка на рынке это уже результат. Далее, путем привлечения клиентов (в том числе и корпоративных) мы вышли не неплохой оборот, с которого и покупали собственное оборудование. И вот, его стало уже достаточно, для того чтобы претендовать на собственный дата-центр (ну а о реальных причинах вы знаете и без нас).
Финансовая сторона вопроса — проста. Мы потратили на строительство дата-центра примерно столько, сколько заработали с ноября по май. Это не космическая сумма, но маленькую квартирку в области купить можно. Мы не привлекали сторонних инвестиций, один из учредителей добавил небольшую часть средств для помощи с неожиданным переездом, после того как увидел финансовые отчеты. Поэтому можно сказать, что на все это мы практически заработали сами.
Мы сэкономили огромное количество средств при постройке, на модульности. А именно, мы купили столько ресурсов — сколько нам нужно. Генератор — 5 кВт, ИБП — 5кВТ и т.п. Больше — всегда можно доставить, а вот «солить» не нужные ресурсы — не целесообразно для нашего проекта. Вот уже сейчас к нам едет новый ИБП, который мощнее старого и будет работать с ним в «паре», хотя нагрузка у нас еще не дошла до порога.
Из чего же состоит стоимость услуги? Как мы это видим?
В стоимость услуги нужно заложить ряд параметров, которые нужно посчитать и которые не понятны на первый взгляд. Например, в услугу выделенного сервера нужно заложить следующие параметры:
- 1. Оборудование и его амортизация. Мы закупаем серверы компании HP б.у., для того чтобы снизить конечную цену для потребителя. На деле — серверы в отличном состоянии, с гарантией от нашего поставщика и с конкурентными процессорами. Более того, оборудование HP имеет очень низкое энергопотребление, но об этом позднее.
- 2. Электропотребление. Тут нам повезло больше. Небольшой сервер HP потребляет до 100 Вт. В сутки это 2,4 кВт. В месяц это 72 кВт. А в деньгах это 144 грн. ~ или 6$. Для сравнения сервер старой конфигурации C2Duo или C2Quad потребляет в несколько раз больше.
- 3. Кондиционирование и фрикулинг. Необходимо учитывать расходы на кондиционирование и фрикулинг в холодное время года. Наш кондиционер потребляет 10 кВт в среднем при кондиционировании, в сутки это 240 кВт, и 7200 кВт в месяц. А это 14400 грн. или 576$ ~. Не мало, правда? Фрикулинг в этом плане потребляет в разы меньше, около 1-2 кВт. Если разделить эту сумму на весь цод — не критично, но он пока не весь заполнен. И это еще не все.
- 4. Обслуживание помещения, охрана, и прочие мелочи, еще съедают приличную сумму. Порядка 200-300$/мес.
- 5. Поддержка — львиная часть расходов. Стоит учесть что работа поддержки у нас разделена на три смены. 7-15, 15-23, 23-7. Выходные тоже должны быть перекрыты, а плюс еще — старший администратор который должен быть доступен 24/7. Итого 3+1 человека в сутки. Плюс 2 в резерв когда у первой смены выходные. Плюс фин отдел. Итого выходит на зарплатный фонд минимум 2000$, а в пиках доходит и до 3000$.
- 6. Интернет-каналы. А их два плюс 1 резервный. Это еще часть средств, которые нужно заложить в оборудование. А именно, 1 мегабит в среднем стоит 1$. 2 канала по 1000 мегабит = 2 000$. Конечно за счет опта это чуть дешевле, но все-же. Что касается резервного — там оплата по трафику, там проще.
Итого, формируется цена одного сервера исходя из всех этих параметров. И при честном формировании с парком до 100 серверов (делим цену на 100 серверов) — она выйдет приличной, давайте считать:
- Сервер стоимостью 1000$ с окупаемостью скажем на 24 месяца. 41$
- Кондиционирование + энергопотребление, еще 10$ ~
- Помещение еще 3-5$
- Поддержка, еще 20$ в стоимость
- Интернет-канал еще где-то 15$
Получаем сумму минимальной сдачи в аренду — 91$. При этом реально сдаем мы такой сервер за 55-70$. И все это, при условии что мы «имеем» 100 постоянно загруженных серверов.
Конечно это лишь сухие цифры и эти рассчеты весьма абстрактны, кто то платит больше, кто то платит не только за сервер, а и за IP и доп. услуги, но все-же, я хочу чтобы сообщество знало и понимало, сколько расходов у хостинг-провайдера со своей инфраструктурой. В объеме до 100 серверов — это скорее убыточно, без доп. сервисов и прочих экономий которые мы достигаем.
Но при этом я вовсе не хочу сказать что мы работаем в минус, нет, напротив, мы работаем с небольшой прибылью и на перспективу. Нам куда важнее привлечь клиентов качеством, чем потом грызть собственные локти, когда их потеряем. Это лишь малая часть того, что мы можем рассказать, но она не менее важна в комплексе.
Следующие статьи мы постараемся сделать более предметными и привязанными к реальным событиям и работам в нашем дата-центре и в компании в целом. К нам уже приехала интересная железка, Блейд HP C7000, о которой можно рассказать очень много, а еще больше показать. Так-же вскоре на нашем YouTube канале выйдет первое видео о работе нашего дата-центра.
Собственно сам блейд C7000:
Спасибо за внимание.
Комментарии (54)
Acheron
04.11.2016 12:15+1Зарплатный фонд от 2К на > 5 человек. Это ж что за зарплата получается?
Night_Snake
04.11.2016 13:10это же Украина :) В РФ вышло бы больше гораздо
TakeWYN
04.11.2016 13:15Каждый из нашей команды работает на перспективу. И тем, кто остается с нами (а текучка огромная) мы постепенно повышаем зарплату. Начинали вообще с ничего :)
Night_Snake
04.11.2016 13:21+4ну я догадываюсь, что «денег нет, но вы держитесь», и большинство работает
за едуза идею.
тут ведь главное, чтобы экономия денег на персонале не вошла в привычку.TakeWYN
04.11.2016 21:37+1У нас нет нагрузки на персонал, все автоматизировано. Ну и к тому-же, посмотрите зарплаты в Украине. Мало где сейчас можно заработать 200$, не то что больше. А тут — в основном удаленно, в офис реже, нормальные смены, почти без нагрузки.
Единственное кому достается — старшим админам, это да. Им платим куда больше.Night_Snake
04.11.2016 21:39+1Не, я о другом. Когда бизнес мало платит на старте, вкладываясь в развитие — это объяснимо и даже неплохо, наверное. Но вот когда бизнес растет, а экономия на сотрудниках остается — это называется кроилово, и это уже совсем не хорошо.
TakeWYN
04.11.2016 21:57+1Я считаю что люди должны получать пропорционально своему труду. Когда обязанностей больше — зарплата растет. Так, мы уже трижды подымали зарплату нашим сотрудникам. Собственно что и будем делать. Никто не будет работать хорошо на мизерную зарплату.
Night_Snake
04.11.2016 22:19+1честь вам и хвала, если так делаете :) я, к сожалению, сталкивался с обратной ситуацией неоднократно.
Acheron
04.11.2016 21:27Ваша ирония не к месту.
На западной Украине такая зарплата у вполне себе рядового эникейщика в небольшой компании, того я и удивился. Не верите — выключите телевизор и посмотрите местные сайты с вакансиями.Night_Snake
04.11.2016 21:39Какая именно? Две штуки баксов эникею? Пруф можно?
Acheron
04.11.2016 22:42А где в статье вообще речь о 2К баксов на человека?
От 200 у.е в среднем, бюджетники ~ 100-150. Предел в среднем по моему региону ~500-600 у.е, но это не город-миллионник.
Если о бизнесе «в общем», то конечно да, сейчас местный бизнес любит за красивыми словами о «повышение зарплата пропорционально росту обязанностей/компании» скрывать низкие зарплаты и тотальное жлобство в независимости от объемов выполняемой работы. Но я думаю, что это общая практика для постсоветского пространства.Night_Snake
04.11.2016 22:46Тогда я не понял, почему вы удивились моей иронии.
Еще раз — у ТС ФОТ 2-3к баксов где-то на десять человек (плюс-минус). Я написал о том, что в РФ даже на удаленку это практически нереально (если только не запускаться где-нибудь в глубинке, но там возникают проблемы со связностью и логистикой).
Так что не так с моей иронией?TakeWYN
04.11.2016 22:58+1Друзья, если люди работают значит их устраивает. Повторюсь, у нас автоматизировано 90% процесса, а пашут только старшие админы, которые и получают соответственно. За то, чтобы посидеть 8 часов смены и ответить на 2-3 тикета вида «когда будет машинка» или «не запустился сайт» — платить 1000$? Ну это смешно :)
Распределяйте нагрузку L1, L2, L3 и будет Вам счастье. Никогда саппорт первой линии не получал больших денег. Потому что больших знаний не нужно. А вот старшие администраторы — всегда имели много. Вот и все.
И еще. L1, в основном, мы обучаем. Никто готовым админом не приходит. Даже о IPv6 не все знают, я уже не говорю о другом :)
u010602
05.11.2016 15:15Ну я бы сказал что и в Украине такие зарплаты для специалистов совершенно не реально малы. С другой стороны сейчас идет большой поток переучивающихся в сторону айти, многие готовы работать за еду — только научите что-то из айти. Но это тоже не тривиальная задача, брать персонал с 0 и учить и знать, что свалят же когда научатся. Но в целом на данный момент такой прием доступен работодателю — «раш стажерами» я бы сказал.
Опять же сапорт в Украине всегда был популярной работой для студентов, т.к. можно брать ночные смены, подтягивать язык, а иногда и вздремнуть или курсач пописать, когда смена спокойная. Видимо сейчас некоторые особо скучающие в офисах могут подрабатывать в сапорте по удаленке.
Ну и нужно понимать что Л1 это все таки ребут рестарт и просто общение, дабы выяснить в чем проблема и потом передать дальше. А так и 400 баксов выглядит переплатой за такую работу. Реально можно взять и на 300.
С другой стороны админы которые «что-то могут» в линуксе уже от 500 идут и до 1000 в среднем. Продвинутые больше, но для них работы мало, т.к. мега конфигурации не требуются почти ни где.
Судя по моему личному опыту, в РФ больше стремятся замутить мега ЦОД в главном офисе или в целом где-то в центре. Поставить виртуализацию, раздать удаленные аккаунты, и в общем все это очень хитро и активно администрировать.
В Украине подходят намного проще, локальный сервак почти в каждом отделении банка есть, а на столах обычно не тонкие клиенты, а просто слабые компы в мини корпусах. Соотв и админы локальные и ближе к эникейщикам, которые лочат всем все что могут, и к ним все бегают с просьбами — скинь на\с флешки.
Melanxolik
04.11.2016 12:15К сожалению видно что у вас в стойке не совсем чистота, почему не проводится уборка?
TakeWYN
04.11.2016 12:16Это фото как раз после установки блейд-системы, когда было мусорно и пыльно. Разумеется после этого уже убрали.
Alexsandr_SE
04.11.2016 13:45+1Не понял как работает в плюс при сумме минимальной сдачи в аренду — 91$. При этом реальной оплаты за сервер 55-70$.
TakeWYN
04.11.2016 13:54Есть и другие доп. услуги, администрирование, IP адреса, и т.п. На этом и зарабатываем.
Alexsandr_SE
04.11.2016 14:19IP стоит не дорого, получается администрирование. стоит около 40-50 у.е. получается?
zzzcpan
04.11.2016 18:44Попробую на пальцах объяснить. Смотрите, они пишут, что вложили заработанные деньги, значит там реально нет 41 долларов в минимальной сумме аренды, а 0 вместо них и минимальная сумма аренды на самом деле 51 доллар. Дальше им достаточно работать чуть-чуть в плюс от этой суммы, чтобы зарабатывать больше, чем зарабатывали раньше. Это они потом опять вложат и опять и сколько-то уже останется и себе.
ESelin
04.11.2016 18:45Молодцы!
Читаю цикл статей с самого начала. Радуюсь, что находятся земляки, которые не боятся в столь смутное время вкладываться в становление и развитие бизнеса.
Так же радует, что не экономите на спичках и, в то же время, не тратитесь на лишнее.
Желаю удачи и дальнейшего развития!
Мы, к сожалению, были вынуждены перенести свои сервера за пределы страны после того, как пару раз «арестовывали имущество» — сперва в офисе, а потом и в датацентре. После судебных разбирательств всё возвращали и даже извинились один раз. Но куча нервов и нарушение работы фирмы в моменты «ареста» стоят дороже, чем небольшое замедление из-за удалённости сервера.TakeWYN
04.11.2016 18:46Здравствуйте, спасибо за поддержку!
Как по мне, IT — бизнес который можно за считанные дни развернуть в любой стране мира. Если конечно он того стоит. Поэтому аресты… конечно страшны, но не так как «фабрике» например.
MxMaks
04.11.2016 18:46Когда один сайт на VDS стал приносить больше чем весь этот хостинг я понял, что материальный бизнес это не мое.
k155la3
04.11.2016 18:46Есть некоторая зависть к тому, что такой бизнес где-то ещё вообще возможен. :)
У нас — точно нет.
Самое хитрое тут — привлечь клиентов.
Чуть посерьёзней контора сделает свою серверную гораздо лучше (и сэкономит в перспективе, и получит лучшее качество, и будет иметь 100% доступ к аппаратуре).
Подбирать крошки с «Рогов и копыт» сложно, и конкуренция-то — мировая, «Рогам и копытам» несложно прикупить сервер (физический или виртуальный) на какой-нить столичной или мировой IX-площадке.
Поэтому такое возможно только там, где маленьких _платёжеспособных_ контор без своих компетенций очень много. И все эти условия (маленькая, без компетенций, с деньгами) принципиальны…TakeWYN
04.11.2016 18:47Все возможно, если очень стараться. Другой вопрос, выгодно ли? Ну в этом посте мы постарались объяснить. Конечно конкуренция огромная, но если есть конкуренция — значит есть и спрос.
darkangel66
05.11.2016 13:06TakeWYN
Вы обещались так же сделать статью о вашей антиддос защите. Которая судя по всему уже должна быть ведена в эксплуатацию.TakeWYN
05.11.2016 13:06У нас нет защиты от DDoS более того мы её даже не заявляли. В планах и тестах — возможно, на практике — еще нет. Пока не нашли приемлемого решения.
TakeWYN
05.11.2016 13:08P.S. Вот уже кто то испытывает из недобросовестных конкурентов.
https://twitter.com/wetakewyn
darkangel66
05.11.2016 13:16ммм
я лишь руководствовался вашим же комментарием про арбор:
https://habrahabr.ru/post/312870/#comment_9864580
Если ваши каналы не позволяют фильтровать самим то самое время обратится к DDoS-guard.net (не реклама но партнеры достойные)TakeWYN
05.11.2016 13:19Обойдемся, спасибо. Их положили когда ihor к ним обратился.
darkangel66
05.11.2016 13:31Ну вы сравните размеры айхор и ваш проект. Какие атаки могут придти на айхор и на вас. Наша компания пользуется услугами гвардов и благодаря им мы о ддосах вспоминаем только из отчетов.
Вот как пример успешно отраженных атак на нас http://c2n.me/3E3IBPD.png
+ буквально пару недель назад гварды закончили крупную модернизацию узла в РФ.
Я могу лишь рассказать свой опыт и на личном опыте сотрудничество с гардами вызывает только положительные эмоции.
alexhott
06.11.2016 16:46Все кончно здорово, особенно для создателей.
Но это до первого дедлайна на пару дней.
Дальше все клиенты разбегутся и придется закрывать лавочку.
Помимо питания надо все резеврировать. По тексту там даже питание не полностью зарезервировано, а только питание серверов.
Если повезет то конечно можно стабилный доход получать, но развиваться и конкурировать с крупными центрами будет не просто.TakeWYN
06.11.2016 16:47Питание у нас зарезервировано, разные вводы. ИБП стоит, генератор есть. Каналы 2+1 Что не резервировано?
darkangel66
07.11.2016 10:30Почитал ваш твиттер…
есть бесплатный метод минимизации потерь на случай ддос. краткий смысл в том что:
берем поток netflow и слушаем на предмет аномалий за N промежуток (мы брали промежуток 60 секунд). Если скорость по каким то определенным показателям превышает пороговые значения то отправляем атакуемый IP в блекхол (практически все аплинки предоставляют такую услугу).
Через какое то время снимаем блок (мы снимали через 5 минут). Система получается полностью автоматизирована и не доставляет сложностей ни админам ни всему ДЦ в целом.
Под аномалиями именно у нас понималось неадекватно большие потоки трафика с DNS/NTP/CHARGEN/SSDP/PORTMAP служб. (ну вы представляете себе например 100 мегабит DNS легитимного трафика на 1 IP? вряд ли правда ?) почему именно они? потому что это самые широко используемые ампфликаторы.TakeWYN
07.11.2016 11:01Мы уже сделали немного иную технологию, и рассматриваем варианты juniper mx который делает блекхоллы на автомате с отсылочкой. А так — спасибо
darkangel66
07.11.2016 11:11И да, Виталий, вот тому человеку которому «только мне показалось странным»… с соседнего форума… Я действительно зарегистрировался только для того что бы комментировать вашу тему а до этого был исключительно читателем как на данном так и на «соседнем» форуме… если интересна моя мотивация зарегистрироваться именно сейчас то всё просто, то что вы делаете это как раз тот шаг к которому идет наша компания. Сейчас мы располагаемся в сторонних ДЦ но затраты на аренду стоек стали столь велики что начали всерьез задумываться о стройке «своего маленького ДЦ» и ваш пример для нас является чуть ли не маршрутной картой. Хочется научится на чужих ошибках дабы не преодолевать их самим.
Да, было очень неприятно прочитать такие подозрения в свой адрес.
ps там регистрироваться не буду. Останусь читателем.TakeWYN
07.11.2016 11:16Относительно Вас я ничего не могу сказать, однако каждый пост на хабре = ddos. Это явно взаимосвязано, конкуренты не дают отдохнуть. Хотя я к этому отношусь спокойно, у нас клиенты понимающие и преданные. Когда нужно отобьем, когда нужно потерпим.
С другой стороны, не было бы атак — мы бы сейчас не изменили свои уязвимые места. Все к лучшему.darkangel66
07.11.2016 11:30За то вы теперь знаете как получить бесплатное нагрузочное тестирование ДЦ.
Многие платят большие деньги а у вас бесплатная фича!
Написали новый пост -> нагрузка…
снова потребовался тест -> пишем новый пост.
MinamotoSoft
Интересно, а где в «калькуляции» стоимость ПО? Или на рутреккере все бесплатно?
TakeWYN
Мы не закладываем стоимость п.о. а используем открытое. Windows предоставляем в trial версии.
SleepwalkerOne
А так можно разве было? Извините за возможно глупый вопрос, но если это не секрет поделитесь как это работает?
TakeWYN
Мы выдаем клиенту Windows в триальной версии, а затем он может её активировать своим купленным ключом.
SleepwalkerOne
Извините за глупый вопрос, т.е. я верное понимаю что таким образом возможно в триальный период, получая каждый раз новый триал, использовать её для бизнес целей? Как к этому MS относится?
TakeWYN
Чтобы получить trial нужно переустановить ОС. MS — сами ввели бесплатный trial на 180 дней.