Добрый день! Хабарчане.

Каждый в нашем дружном сообществе, рано или поздно сталкивался с тем, что вроде все есть для счастья, но все равно почему-то грустно, и хочется что-то поковырять.

Примерно такое состояние меня «накрыло» в последнюю неделю декабря 2024го года.

Все готовились к новогодним праздникам, закрывались(скорее тушились) последние «горящие» проекты, и во всей этой суматохе, я сидел и все не мог найти того, чего мне не хватало...

Так как моя больная голова всегда восхищалась всем, что может находиться в «серверной» я в очередной раз, зашел на всем известную доску объявлений, дабы посмотреть сколько стоят железяки, расстроиться и выйти оттуда. Были конечно цены и интересные, но в основном на крайне старое и уже бесполезное железо в нынешних реалиях.

После скроллинга этой доски, ради интереса решил глянуть на Яше... И тут на глаза попалось ЭТО:

дороговато, но.... вай нот?
дороговато, но.... вай нот?

И тут что-то внутри зажглось... И что‑то прям захотелось поковырять это, тем более и для тестового стенда что то присматривал, и внутреннее желание «чего‑то жужжащего» на балконе никогда не покидало меня.

Но что я получу за эти деньги, и что мне нужно докупить для адекватной сборки этого счастья... а получал я всего-то ничего.. Вот список:

  • Сервер DL380 Gen9 HP ProLiant

  • Процессоры — 2 шт. Xeon E5-2609v3(6 Core, 1.9 GHz, 6.4Gt/s)

  • Оперативная память — 32GB DDR4-2400T

  • Tray для дисков в комплекте — 2

  • Блоки питания — 2шт. 800W

  • RAID контроллер — HPE Smart Array P440ar 2GB

  • Сетевая карта — 4 x 1gbe

  • Удалённое управление — iLO 4

Маловато... нужно больше... всего...

В первый список закупки было добавлено следующее:

  • 8 дисков Seagate 500 ГБ ST500LT012 + 6 tray для дисков

  • 6 плашек 16 ГБ DDR4 2133 МГц что-то китайское, но пойдет.

  • 2 ssd m2 по 1Теру + 2 адаптер PCI-E - m2

Мда... в этот момент в корзине уже на 80+ т.р но огонь в глазах не могли затушить даже такие комментарии от знакомого:

Да, да, и тебя с наступающим :D
Да, да, и тебя с наступающим :D

Все новогодние я провел в ожидании подарка от Деда Смороза.. И вот, наконец оно приехало... Радости было, как у ребенка. Было куча идей, что я буду на нем делать, какие сервисы поднимать, и вообще, может стартап свой открою, и буду загребать баблишко...

Первый запуск...

Что нужно сделать первым, когда в твои руки попадает собственный сервер? Правильно! сразу-же вставить в него сеть 220, открыть крышку(что бы было), и запустить...

Моя жилая девятиэтажка сразу начала вибрировать...

Минут 5 он хреначил на полных оборотах, красиво мигал и скорее всего, начал понимать, что его ждет в ближайшее время... После чего я понял, что смысла гонять его впустую нет, потушил, вернул слух, и начал его заполнять купленным железом.

Настройка и первые ошибки

После того как все железо было воткнуто, было принято решение вновь запустить сервак, и уже начать постепенный ввод в работу.

Так как мне нужен был тестовый сервер для разворачивания той или инной инфры, было принято решение развернуть на нем Proxmox VE и все HDD диски поставить в рейд для хранения виртуальных дисков, исошников и бекапов всего что будет крутиться на проксе.

По этому, изначально я пошел в ILO, для того что бы посмотреть какие ошибки есть(их к слову не было) и вообще ознакомиться со всем, что можно в панели администрирования.

После изучения и прощупывания ILO, полез в настройку рейда, и поставил собираться 50 рейд(по совету хорошего знакомого...)

Девятиэтажка вновь начала дрожать, слух теряться, а жена... Жена открывала рот(видать кричала) но я к этому моменту уже не слышал ее.

После прилета подзатыльника от жены, было принято экстренно потушить сервер спустя 20 минут попытки сбора рейда, и думать что-то с охлаждением...

Паять я умею, usb порт на материнки сервера есть, по этому было сотворено это чудо:

мне кажется, тут он просил уже добить его...
мне кажется, тут он просил уже добить его...

Стало тише, стало интереснее. рейд собрался, ошибок 0, поехали дальше.

На ssd была установлена ОС Proxmox и оно ожило. уже работало, уже можно было развлекаться. Но после того, как прошло несколько дней, я понял, что совершил несколько критических ошибок...

  • 50 рейд для домашнего сервера это излишек

  • 50 рейд для медленных hdd это смерть

  • 50 рейд для hdd предназначенных для ноутов, это клиника...

  • 50 рейд .... это лютый перегрев контроллера на корзине в самом сервера, и рандомные выключения с ошибкой о перегреве собственно этого контроллера.

  • Напрямую установленный proxmox это тоже довольно не удобное решение в плане разметки дисков и остального.

По.. Пляшем

Было заказано и заменено следующее:

  • все hdd были заменены на ssd

  • "кастомная" охлаждайка была заменена на стандартную

  • 50й райд был заменен на 1й

  • ОС была переустановлена на debian12 на которой поверх был установлен проксмокс.

На данный момент, спустя уже почти год работы, Сервер себя чувствует прекрасно(ну почти). Если не вдаваться во влажность и остальное, с чем можно столкнуться на балконе, то он полностью отвечает требованиям для тестового сервера, с которым можно играться в любое удобное время.

За все это время, было развернуто 40 вмок, которые +- постоянно крутятся, и порядка 60-70 временных. Так же, за это время были замены процессоры, заменил на E5-2699 v3, а так же закуплена оперативка.

В довесок, был собран доп сервер NAS в домашнем корпусе используя те самые медленные hdd для файловой помойки.

Аптаймом хвалиться не буду, так как каждый месяц у нас с ним происходит ТО, по отчистки от пыли и проверки всех аллертов, но как итог, могу сказать что машинка живучая, и даже в моих неопытных руках, оно выжило и продолжает давать все возможности, которые я от него хочу получить. А по шуму кстати, примерно как холодильник. Свежий! Не ЗИЛ! Спать не мешает, девятиэтажка не трясется, ВООБЩЕ.

Итог

Как итог, хочу сказать следующее:

Люди, которые говорят, собрать сервак на хуанане, и использовать все доступное/дешевое/простое на самом деле, в какой-то степени правы. Да, можно было получить то же самое за меньшую цену. Да оно бы было тише. Да Да Да... Но вся эта история помогла мне поднять скилы довольно сильно, не только в железе, но и во многом другом. По этому, хочу сказать что если вас терзает какая-то идея, и все вас отговаривают... Слушайте только себя, и даже если вы будете не правы, если будете набивать шишки, то эти шишки будут свои.

Моя вот шишка в том, что сервер есть, а идей какой пет-проект на нем развернуть, пока не посещали... Все кажется банальным или невыполнимым.

Спасибо, что прочитали! Постараюсь в скором времени порадовать Вас интересными проектами, и возможностью поучаствовать в жизни моей маленькой серверной.

Комментарии (8)


  1. shuchkin
    25.10.2025 14:24

    дело хорошее, рад что пашет, у меня DL120 и кстати я не смог завести райд контроллер, работал на софт. варианте, год ревел в пустой квартире, а в жилой неделю не протянул и после семейного совета был отключен, 10 лет тихо пылится


    1. RoGuS Автор
      25.10.2025 14:24

      Привет! при выборе сервака отталкивался от того, что 1u серваки всегда орут, даже без нагрузки. По этому и решил взять 2u ибо они менее горячие.


  1. shlmzl
    25.10.2025 14:24

    Процессоры — 2 шт. Xeon E5-2609v3(6 Core, 1.9 GHz, 6.4Gt/s)

    Цена пары этих процессоров на Озоне примерно 700р. А все железо которое задумали - под 100К. Как-то странно все это.


    1. RoGuS Автор
      25.10.2025 14:24

      Ну в базовой комплектации да, но на данный момент уже стоят E5-2699 v3


      1. shlmzl
        25.10.2025 14:24

        Но ведь нельзя же вместо процессоров в сумме 150 ватт мощности взять и просто так воткнуть процессоры в сумме почти 300 ватт. Фишка в затратах на сервер - в балансе производительность/надежность, а здесь вы его перегружаете, - это уже не сервер, нет смысла в переплатах, проще купить на Озоне Xeon V4 или V5 по технологии 14нм в комплекте с MB и новый обычный немного продвинутый корпус и PSU.


        1. RoGuS Автор
          25.10.2025 14:24

          Не совсем понимаю, чем я его перегружаю, если там 2 блока по 800 ватт... Могли бы Вы поподробнее описать свои сомнения?


          1. shlmzl
            25.10.2025 14:24

            Не совсем понимаю, чем я его перегружаю, если там 2 блока по 800 ватт... Могли бы Вы поподробнее описать свои сомнения?

            Если в сервере штатно стоят процессоры на 150 ватт в сумме, то нельзя так просто взять и заменить их на процессоры 300 ватт. Сервер это не конструктор "собери сам" - это законченное изделие, иначе теряется весь смысл переплаты денег по сравнению с "просто купил у интегратора кучу коробок" с компонентами PC и собрал сам. В вашем конкретном случае те же 36 ядер наверное можно было бы набрать 4 копеешными MicroATX сборками 10-ядерными V4 или V5 , холодными и почти бесшумными. При всем этом респект за проделанную работу.


            1. RoGuS Автор
              25.10.2025 14:24

              Я же описал, что не спорю с тем, что можно было собрать это все дешевле, тише, компактнее... Идея сервера это чисто моя хотелка.
              По поводу того, что нельзя просто взять, и впихнуть два проца помощнее... можно, ровно так же, как и добавить оперативку, ровно так же как и добавить райзер, если тебе это нужно, или теслу(GPU) если ты хочешь поиграться с ними.
              По желанию, можно кастомизировать сборку сервера как тебе будет удобно. Даже если это не "домашняя лаба", а вполне себе рабочая железка в какой либо компании. Просто чаще всего, проще купить уже готовую сборку, и не тратить время и деньги специалиста, который это потом будет переделывать или доделывать. Так же, есть конечно заморочки в плане совместимости, поддержки, TCO... но повторюсь, это домашняя лаба!