В интернете везде можно найти красивые фотографии помещений ЦОД Google, Яндекса и прочих, но вот кадры реалий некоторых дата-центров найти намного сложнее. Ниже вашему вниманию предлагается серия душещипательных снимков ужасной коммутации оборудования и прочих страстей в машинных залах и серверных помещений ЦОД со всего мира.



Смотря на эти фото можно сделать вывод, с какой халатностью руководители и сотрудники относятся к своей работе, а, следовательно, ни о каком нормальном сервисе и должной отказоустойчивости не может быть и речи. Перед просмотром хотелось бы сообщить, что данный пост несет скорее развлекательный, чем информативный характер.





Пример хорошей коммутации



Без комментариев







Потерялся в проводах





Серверы после длительного пользования



Это вообще что?



Найди красный



Одиноко бывает в пустых помещениях ЦОД



Далеко бегать не надо





Чистота и порядок залог успеха





Свет в конце тоннеля



Еще один пример правильного рабочего места







Вот она система кондиционирования





Серверная после пожара



Работа работой, а отдых по расписанию



Еще один пример, почему не надо делать ЦОД в офисе



Спасибо за внимание, и хорошего настроения.

Комментарии (49)



  1. memtew
    03.04.2015 17:39
    +18

    Вспоминается шутка:


  1. stalinets
    03.04.2015 18:48

    Что интересно, жёлтой (одномодовой) оптики всё-таки заметно больше, чем оранжевой (многомодовой).


    1. JDima
      03.04.2015 19:34

      Оптику в количестве больше пары волокон разглядел только на картинке с собакой. Многомоды полно. Желтые патч-корды смахивают на медь (прямо перед физиономией инженера явно RJ-45 болтается), но сложно понять, и в любом случае оранжевых больше.


    1. navion
      05.04.2015 03:18

      Одномод почему-то очень любят прокладывать подрядчики вне зависимости от расстояния.


  1. prishelec
    03.04.2015 19:34

    Мда… Потрясающая подборка. Хотя с долей печальки.


  1. Rumlin
    03.04.2015 19:51

    «Энтропия увеличивается»


  1. NeoCode
    03.04.2015 20:50
    +4

    Спасибо! Обожаю такие фотки. Есть в них какая-то хакерская эстетика…


  1. iamdeuterium
    03.04.2015 21:09
    +19

    Очень не удобно, когда подписи под картинками.


    1. nitro80
      04.04.2015 08:45
      +4

      Да, привычно ищешь смысл на следующей после надписи фото и не находишь.


  1. Cobolorum
    03.04.2015 21:27
    +5

    Все это фото реальной жизни, а не лабораторной пробирки.


  1. XogN
    03.04.2015 21:55

    А какой запах в таких помещениях!
    Неповторимый аромат электроники, пластика и чего то еще.
    Запах данных :)


    1. JDima
      03.04.2015 22:33

      Запах… Не должно там быть запаха.

      Не так давно надо было кому-то грамотному поехать в один из ЦОДов, платы подергать. Вызвался молодой коллега, ни разу там не бывавший. Всем коллективом провожали, смахивали слезу, завидовали человеку, который с радостью идет в машинный зал и не считает нахождение там пыткой.


      1. dimarikpro
        04.04.2015 06:47
        +1

        а я вот тоже бы пошел, смотрю на это и руки чешутся — порядок навести хочется.
        Как по вашему сколько понадобится времени грамотно уложить все провода и проверить чтоб все работало на самом запущенном из этих фото?


        1. JDima
          04.04.2015 12:01
          +2

          Если в мои задачи не входит ежедневная работа с СКС — я бы это говно не трогал :)

          Время зависит от критичности тех проводков. Надо всё полностью раскроссировать и заново подключить. Возможно — перед этим заменив лотки. Днем как правило не удастся Третья фотография — часа два-три работы. Двенадцатая (перед собакой) — как минимум от вечера до утра в спешке. «Wall of death» из комментариев затянется на месяцы, потому что с теми патч-панелями порядок невозможен вообще.


        1. KorDen32
          04.04.2015 18:48

          Тут еще вопрос — укладывать провода, остановив полностью стойку, или стараясь прерывать работу на как можно меньшее время?
          Я как-то у себя в квартире переделывал кабели в субботу, на игровом сервере, стоящем в кладовке, было много людей (в то время провайдерские локалки у нас еще были актуальны, хотя и сейчас живет кое-что в комбинации локалка+инет, бонус в локалке — низкий пинг и максимальная скорость), параллельно еще что-то делалось сетевое на двух ПК (не помню уже), короче говоря приводилось в порядок все поэтапно с минимальным временем отключения кабелей, вначале прикину что с конкретным проводом делать, потом быстро переткну, не разбирая полностью сеть…


        1. stalinets
          05.04.2015 19:12

          На заре своей трудовой деятельности я участвовал в замене древнего телефонного кросса времён координатных АТС, который занимал всего одну стойку. Там тоже была полная задница, огромный клубок проводов (витуха, лапша, полевик) и телефонных кабелей ТПП по 25 и 50 пар.

          Тогда мы (около 5 человек) провозились с этой стойкой больше недели. Потому что труда требует не столько перешить кабели на плинты нового кросса, сколько вызвонить и отмаркировать, что откуда и куда приходит, при этом не оставив всё предприятие без телефонной связи.


  1. Sadler
    03.04.2015 22:00
    +10

    При должном усердии в таких серверных можно найти одичавшего предыдущего сисадмина.


    1. spc
      04.04.2015 19:11
      +2

      Угу. А у него в бороде — еще одного. Резервного.


  1. SerJook
    03.04.2015 22:21
    -1

    Надо переходить на беспроводную передачу


    1. darkfrei
      04.04.2015 06:36
      +4

      А как себя ведут тысячи роутров, работающих рядом на одной частоте и закрытые друг от друга металлическими корпусами других компов?


  1. edwardspec
    03.04.2015 22:55
    +2

    Отвечая на вопрос «что на одной из фоток в дата-центре делает собака» — собака помогает чуять нужный провод.


    1. SysCat
      03.04.2015 23:32

      Fluke Dog…


    1. prishelec
      04.04.2015 01:10
      +1

      Там где собака находится очеь даже опрятно по сравнению с остальными. Видимо благодаря собаке ).


      1. edwardspec
        06.04.2015 14:34
        +1

        Позиция: Junior Data Center Dog
        Обязанности:
        — быть лучшим другом сисадмина,
        — грызть неправильно положенные провода, чтоб неповадно было их так класть,
        — чуять перегоревшие свитчи,
        — пережимать зубами витую пару,
        — выгонять сисадмина на ежедневную прогулку, чтоб не одичал.

        Желательные квалификации:
        — soft mouth
        — couch potato (невозбранно дрыхнуть в дата-центре)
        — chick magnet (для социализации сисадмина)


    1. plin2s
      06.04.2015 16:19

      WatchDog же!


  1. Diaver
    04.04.2015 01:46
    +12

    История из жизни:
    На одной из моих работ, генеральный директор был бывшим военным. Однажды он решил осмотреть новое помещение серверной (3 или 4 стойки). Дык вот, то что он увидел ему очень сильно не понравилось, он перерезал ВСЕ провода ножом и потребовал все переделать.


    1. rstepanov
      06.04.2015 14:14
      +2

      Если бы этот бывший военный был директором сервиса 24x7x365, ему бы самому потом что-нибудь перерезали в лесочке, причем никто потом не захотел бы разбираться кто и почему.


      1. Diaver
        06.04.2015 14:24
        +2

        Хуже, этот директор был и является директором довольно крупного, по местным меркам, телекома с несколькими сотнями тысяч абонентов, а серверная, была только смонтирована.


        1. rstepanov
          06.04.2015 14:41
          +1

          То есть не введена в эксплуатацию? Или все клиенты — частные лица? Это можно, на частников всем наср… Вот если клиенты — крупный бизнес — все может сложиться совсем иначе…


  1. openkazan
    04.04.2015 07:11
    +2

    Сами в 90е натворили подобное. Патчкорд воткнул как попало, ладно мне же не пару дней, а через некоторое время треш и адов пи… ц.
    Вышли в ночь переделывать все это. Самое интересное — междугородняя телефонная станция, там и минсвязь и чекисты и вояки и кого только не пришлось предупреждать, и каждый себя позиционирует главным…
    «Нет ничего постоянного, как временная переноска» ©


  1. nitro80
    04.04.2015 08:47
    +1

    У нас на работе примерно такая же серверная была. При переезде в соседнее помещение поначалу начали укладывать кабели аккуратно и пр., однако дальше снова вернулись к кабельному бардаку.


    1. rstepanov
      06.04.2015 14:15

      Аналогично, первые несколько десятков кабелей лежали очень красиво, через год — трэш, угар и все такое…


      1. nitro80
        07.04.2015 03:58

        Видимо надо отдельного человека держать, что б за кабеля и их укладку отвечал, и нещадно банить тех, кто вместо него полезет.


  1. Gordon01
    04.04.2015 09:23
    +1

    Скажите, это нормально?
    Я обожаю рассматривать какие-то поврежденные агрегаты, автомобили. Уничтоженные пожаром серверные, автомобили после серьезных аварий, другую технику. Я один такой?


    1. Rumlin
      04.04.2015 09:41

      Нет. Археологи или палеонтологи такие же. Находят осколок, камень, кость, ржавую железяку и реконструируют.

      Если рассматриваешь остатки оргтехники после пожара и знаешь как оно было до, то в музее со многих вещей удивляешься: как они поняли, что это было и как это выглядело первоначально.


  1. urticazoku
    04.04.2015 09:48
    +3

    До и после
    С сайта cbtnuggets.com, увы, не смогла найти саму лекцию, читает J.Cioara


    1. NeuroTechnic
      04.04.2015 12:30
      +4

      Фигня в том, что красиво не значит удобно. Одно дело когда есть конфигурация и ее надо красиво уложить, и совсем другое дело когда надо постоянно что то добавлять и менять. Найти нужный патчкорд на левом фото гораздо проще.
      На вопрос почему сразу всё не запланировать с избытком, ответ банальный — финансы.


      1. JDima
        04.04.2015 17:14
        +1

        Понятие удобства разноплановое. Вот сдох один из двух свитчей, надо вынуть. Где это сделать проще? Допустим, сгорела линейная карта на большом модульном свитче с высокой плотностью портов — www.cisco.com/c/en/us/support/switches/catalyst-4510r-e-switch/model.html (у меня 4248-rj45v постоянно дохнут). Как ее поменять, если СКС не аккуратно протянут? Если аккуратно, как на второй картинке, то не проблема выткнуть 48 патч-кордов, выдвинуть плату, вставить новую и воткнуть всех обратно, не трогая платы выше и ниже, лишь чуть приподнимая/опуская кабели, чтобы не цеплялись. Если мне это приходится делать, то весь процесс от «выдергиваю первый патч» до «вставляю последний патч» отнимает минут 15 (из них минут 10 на возвращение всего обратно, когда все длины выровнены по сантиметру и патч, предназначенный для 38-го порта, с трудом дотянется до 36-го и вообще никак до 34-го). Когда это делает коллега, отвечающий за СКС, то у него на всё минут 5-10 уходит.

        Случайно найденный пример того, как беспорядок в СКС мог бы привести к невозможности обслуживать платформу: networksaremadeofstring.com/blog/wp-content/uploads/2012/10/P2110014.jpg
        Более красивый пример (у меня большинство кроссировок выглядит именно так, только плат побольше задействовано):
        s-media-cache-ak0.pinimg.com/736x/75/64/50/756450839105f4ce514bfc454ed94326.jpg

        Такого, чтобы требовалось что-то менять, быть не должно. Одна розетка = один занятый порт. Это дороже в плане портов, но это можно будет потом сопровождать. Других вариантов, когда сотни портов сходятся в одну кроссовую, нет.


        1. NeuroTechnic
          04.04.2015 19:22

          Я ж говорю, всё упирается в финансы. Там где СКС и вытаскивание свитча с заменой это одно, а там где этот свитч будет заменятся, скажем, на пару других (потому, что такие были) это другое.
          Ну степень хаоса тоже относительная, конечно. Я комментировал конкретную фотку где до и после. Там не всё так ужасно, как на фото с темы.
          Ну и понятие ЦОД, для меня это что то крупное — датацентр. Серверная местечкового провайдера (или предприятия) на 5-6 стоек для меня просто серверная, а не громкое ЦОД. И там всё грустно в плане финансов. В моем городе если кабель лежит в самых простейших коробах это уже чуть ли не СКС, а что бы кто-нибудь выделил деньги на Marshall-Tufflex — это вообще из области фантастики.


      1. iStorm
        05.04.2015 01:49

        ага. как подумаешь что надо перенести десяток проводов в правой стойке… ее придеться всю пересобрать ))
        или просто выдернуть провода и уложить поверх новые )


  1. miha2
    04.04.2015 15:12
    +1

    Порадуйте нас в следующий раз красивыми стойками с правильной симметрией :).


  1. equand
    05.04.2015 05:23

    Веселуха, им надо в хостинговых стойках пофоткать, там если не клауд, а сданные сервера в аренду, то такая лапша :) особенно с микроклаудами на перед.


  1. Yurich
    06.04.2015 11:15
    +1

    Я как-то однажды причесывал центр коммутации от такого вот ужаса. 400+ рабочих мест, 20+ серверов, 20+ единиц сетевой активки (плюс аналоговая телефония из патч-панелей на кросс-панель), решил, что за полдня в субботу сделаю, заказал пиццы, остановил сервисы, комфортненько так начал выдирать провода и записывать, откуда куда какой провод идет…
    К четвертому часу разбирания и маркировки я понял, что планы на вечер надо скорректировать. В ночь с воскресенья на понедельник, примерно часа так в три ночи я воткнул последний джек.
    Чуть не сдох, если честно.

    Для причесывания почти всего, что на фотках, потребуется только воля, несколько бухт медного и оптического кабеля, клещи, джеки, ну и пигтейлы со сварочной машинкой. За викенд в четыре руки оно все приводится в состояние идеала с составлением кабельного журнала и маркировкой.

    Ну, за исключением последней фотки с желтыми хвостами, конечно, ибо там вообще беда.


    1. Rumlin
      08.04.2015 10:37

      желтый проще сжечь и построить новый


      1. Yurich
        08.04.2015 11:43

        Ну, я полагаю, что и там все причесать можно, причем даже без остановок процессов (если есть резервирование и отключение одной связи ни к чему не приведет), но возни будет — караул сколько.


  1. Karroplan
    06.04.2015 18:25
    +2

    пойдет на троечку? рабочие места офиса на 150 мест
    image