LINUX.ORG.RU

Хочу обновить homelab'у

 , ,


2

3

Всем привет!

Хочу обновить хоум лабу и наконец-то переехать в rack, по факту это будет proxmox кластер, со следующей структурой:

  • net switch
  • pve1
  • pve2
  • pve3
  • HPC Node \ AI Node
  • nas ssd
  • nas cold hdd
  • ups

Почему 19" rack соблазнителен, так это потому что туда можно впихнуть сколько угодно оперативы по сравнению со всякими мини-пк.

Но тут как обычно проблема с шумом. Есть ли в 2026 году способы сделать сервер тихим? Особенно 1\2u? Может уже стало доступно водяное охлаждение или есть какие-то лайфхаки?

★★★★★

Последнее исправление: hobbit (всего исправлений: 1)
Ответ на: комментарий от AntonyRF

все что выше 30-40 децибел мешает спать =(

Ну и какой тогда rack то?

Nas’ы и switch засовывать в виртуалки??? Серьёзно? Я уж думал, эра AIO уже прошла.

Dimez ★★★★★
()

Особенно 1\2u? Может уже стало доступно водяное охлаждение или есть какие-то лайфхаки?

Есть. Причем, довольно давно. Иммерсионное охлаждение.

Могут быть проблемы при монтаже в квартире. Хотя если подумать, все получится.

https://www.youtube.com/watch?v=7E-29anwOpI

https://www.youtube.com/watch?v=talDmg0h9K8

hargard ★★★
()
Ответ на: комментарий от GAMer

Я выше уже писал, если вентилятор расположен горизонтально (т.е. дует на материнку через радиатор) то такой кулер в 4U влезает. Сам использую, модель не помню древняя какая-то уже не продают.

Из относительно новых моделей например Thermaltake Toughair 110 вроде подходит (я его купил про запас несколько лет назад но не примерял ещё).

firkax ★★★★★
()
Ответ на: комментарий от firkax

Thermaltake Toughair 110

Короче, я посмотрел серверные корпуса, по незнанию думал 24u занимает высота 2 метра, но оказалось, что это чуть больше одного метра +- размер стола.

Сейчас наткнулся на Procase, это не реклама, хз какое качество и в целом кажется, что дороговато, но вроде похоже на то что искал, влезают 120-ки кульки, atx бп, нормальная длина и вес. Красивые =) Короче, в 4u получается нормальное охлаждение и можно сделать не очень громко.

Для HPC \ AI ноды: Procase G4-460

Для SSD пула: Procase G4-465, но маловато 8 bay, хотелось бы побольше

Для HDD пула: Procase ES412XS-SATA3-B-0 или вообще Procase BS424

AntonyRF ★★★★★
() автор топика

Если прям лабу с чисто виртуальным юзкейсом, то можно в том же lxd поднять много разных дистров. Для Intent AI Ops мне как раз понадобилась такая лаба.

anonymous_sama ★★★★★
()

так это потому что туда можно впихнуть сколько угодно оперативы

с этого поржал, при нынешних-то ценах))

Lrrr ★★★★★
()
Ответ на: комментарий от AntonyRF

я стоечное наблюдаю много лет. и очень хорошо представляю себе что это и как. и для чего именно так сделано.

у меня сейчас дома есть старый прольянт и ещё кое-что менее распространённое.

вкратце: непригодно оно в общем случае для дома. и не только из-за щума. там и тёплый коридор и габариты неудачные и много чего ещё.

лучше посмотри на то, как сделан hp microserver и думай в этом направлении, щаз есть куча удачных для дома корпусов куда ещё и всё недорогое можно легко вставить. а не переплачивать ненужно за 19" rack-FF.

это добрый совет

ну и 1U - это всегда повышенный шум, в силу физики. 2U ещё есть варианты, но тоже такое себе.

mumpster ★★★★★
()
Ответ на: комментарий от firkax

тащемта это наш вершок как есть. надо импортозаместиться и так и говорить - «одновершковый сервер, 42-вершковая стойка» )))))

mumpster ★★★★★
()
Ответ на: комментарий от Lrrr

дык даже с завтраков первошколяр начнёт откладывать так к коцну обучения мидл-ступени общего образования как раз миновав начальную специального сервер будет забит на все порты разношёрстностью плашек коррелируя с случайной суммой случайных событий конъектур так что большое число гнёзд реально полезнее для экономного роста реже случается необходимость замены особенно по началу

qulinxao3 ★☆
()
Ответ на: комментарий от qulinxao3

тебе что непонятно с ненужностью стоечного дома (в общем случае)?

гораздо дешевле и проще что-то из обычного сообразить, ещё и не такое гудящее будет. вон даже бывают безвентильные БП для обычныой техники, севен [не сикс] тим, например

а 1U - это по определению будет либо blower, либо мелкий карлсон=>повышенны обороты. оба два - большой шум!

а hp microserver - пример удачной конструкции для дома которую однако не обязателньо саму покупать, а можно просто скопировать идею

и пмсм для дома обычно удобнее обычная башня за мало денег, в которую можно напхать обычные, недорогие компоненты, но получив желаемые ТТХ

например, есть такая мать asus w890-sage, можно прикрутить в обычный ATX корпус

mumpster ★★★★★
()
Ответ на: комментарий от mumpster
  1. не я ТС

  2. если мне нужен хомлаб то смотрю на антиквариат который уже есть(под рукой) смотрю сколько будет максимально этот антиквариат нафоршировать - сравниваю с «местным авито/амазоном»

в целом учитывая гиперболический рост инструментальную сходимость и замену основного драйвера на котором этот рост продолжается - а на каком гуманная пенсионная отставка - то любой хомлаб хороший выбор

если же искать лучшее противника хорошего то всё упирается в бюджет( который функция различных ликвидностей )

upd: да фарширование бытовой на максимум чаще оптимально ибо меньше 9 нужно в быту чем юрику у которого иная карта приоритетных издержек

на собственном опыте апгрейда бытовой(компы) техники очевидно что в идеальном обществе всем было бы лучше потрать я это время на общую(и себе больше чем домашнее хобе по diy) пользу по кручению белечьего колеса сансары

т.е. самое простое это найти подходящее(а тут и включается незаметная конвертация компетенции покупателя в покупаемом направлении) изделие(желательно без большого маркетингового бюджета которое очевидно уменьшает траты на реальное изделие)

твои советы годны

qulinxao3 ★☆
()
Последнее исправление: qulinxao3 (всего исправлений: 1)
Ответ на: комментарий от mumpster

пашарут не покидающий Штирлица таки выдал что он американский негр в глубинах сибири Mayday

qulinxao3 ★☆
()
Ответ на: комментарий от AntonyRF

а какой тогда в них смысл? переплатить за стоечное исполнение?

ну и про шум - тут тоже не всё так однозначно. например, в одном сановском 4U сервере были 3 группы по 2 больших вентилятора на 24В. меньше шуметь они от этого не стали. потому что обычно для стоечных корпусов другие приоритеты нежели шум. ))))

а вот для обычного исполнения вполне можно найти корпус у которого будет место под 120мм карлсон и туда подобрать малошумный вариант, они вообще обычно меньше шумят, так ещё есть и специальные малошумные модели, там это легче сделать чем на 80. не говоря уже о мелких.

весь смысл стоечных корпусов - что их можно много и плотно и единообразно набить в стойку. круче были только лезвия, но они почти вымерли из-за неумеренного потребления современных процов. и сама по себе стойка неудобна дома - тяжёлая и гормоздкая да ещё и большая часть по эстетике домой не вписывается. а вот обычный корпус вполне можно подружить с обычной мебелью или даже самому напилить из брусков какую надо и покрасить в цвет интерьера, ведь обрабатывать и покрасить дерево гораздо проще чем металл. плюс есть ещё ЛДСП.

mumpster ★★★★★
()
Ответ на: комментарий от AntonyRF

Я не читал внимательно тему, но на всякий случай напомню очевидную вещь: если все таки соберетесь делать домашнюю лабу в формате «серверной» с rack’овыми серверами, то учтите что все серверные железки/комплектующие стоят на порядок дороже, чем железки десктопного/middle tower форматов :)

gagarin0 ★
()
Ответ на: комментарий от mumpster

весь смысл стоечных корпусов - что их можно много и плотно и единообразно набить в стойку

А у него всего один корпус? Я думал много и есть. Если и правда один, то ради одного стойку конечно незачем делать.

и сама по себе стойка неудобна дома - тяжёлая и гормоздкая да ещё и большая часть по эстетике домой не вписывается

4.2

а вот обычный корпус вполне можно подружить с обычной мебелью или даже самому напилить из брусков какую надо

19" корпус тоже никто не мешает засунуть в обычную мебель. Не знаю только, зачем.

ЛДСП

У меня у самого есть мебель из данного материала, но указывать его в качестве преимущества не стоит. Преимущество разве что в цене (опилки бесплатные), но на фоне того железа, что описывает автор, это точно неактуальный вопрос.

firkax ★★★★★
()
Ответ на: комментарий от gagarin0

то учтите что все серверные железки/комплектующие

Речь про геометрию корпуса же, а что внутрь сувать отдельный вопрос. Крепления материнок, плат расширения и дисков у бытовых и серверных корпусов одинаковые, если речь не про проприетарные форматы.

firkax ★★★★★
()
Ответ на: комментарий от firkax

19" корпус тоже никто не мешает засунуть в обычную мебель.

ну-ну. засунь прольянт в неё ))))))

если чо - он у меня сзади лежит. пипец неудобный для домашней мебели!

про мебель - ты ваще ничо не понял! но туда же!

из ЛДСП удобнее всего делать щиты то бишь полки и т.п.
а несущие конструкции - делать из бруса, только не клееного.
это физика!

mumpster ★★★★★
()
Ответ на: комментарий от firkax

твоя речь выдаёт в тебе профана в серверном железе
ибо одинаковые у стоечных только для безродного китая который суть обычный десктоп только в стоечном исполнении. и там обычно 4U, что отмнимает половину смысла у затеи, проще и дешевле тогда взять обычный, НОРМАЛЬНЫЙ корпус для условной настолки

весь смысл стойки - в массовом применении однотипного, в частности, по типоразмеру. идея такая же как морского контейнера

mumpster ★★★★★
()
Ответ на: комментарий от mumpster

Почему именно proliant? Они все одинаковые снаружи. У меня под стол с запасом влезет например (70х140см пустое место).

Про мебель я всё понял, но ЛДСП это плохой материал - склеенные опилки покрытые декоративной пластмассовой плёнкой, единственное его преимущество это низкая цена. Полки лучше из фанеры делать, и выглядит красивее, и прочнее.

firkax ★★★★★
()
Ответ на: комментарий от mumpster

Ну отчасти я их понимаю, эстетически серверная стойка с rackо-образным железом выглядит аккуратно и опрятно, у меня самого домашняя лаба состоит из 10 декстоп «серверов», и одной middle-tower железки, компуктеры стоят под столами :) доступ до них местами затруднен и выглядит не опрятно.

Но при принятии решения я бы опирался от бюджета, условий и целей, а не умозрительно расставлять ракообразное железо в умозрительную стойку :)

gagarin0 ★
()
Ответ на: комментарий от mumpster

ибо одинаковые у стоечных только для безродного китая

А если мой коммент аккуратнее прочитать? Я ж писал: «если речь не про проприетарные форматы».

суть обычный десктоп только в стоечном исполнении

В этой фразе отсутствует всяческий смысл, зато присутствуют лишние понты. Стоечное исполнение нужно чтобы удобно ставить железо в стойку и экономить место. Можно, кстати, и нестоечные корпуса туда засовывать, но не так удобно. Вопрос того, какие у этих корпусов будут внутренности - отдельный, там может быть что угодно, хоть десктопное, хоть серверное, хоть вообще что-то незаводского исполнения.

и там обычно 4U

Да нет, они любых размеров бывают. И даже в 1U там (повторю, речь не про брендовое) обычные ATX-крепления материнки, разве что кулер нужен низкопрофильный, и если нужны платы расширения то они через riser (простой механический удлилитель pci-e с боковым слотом).

, что отмнимает половину смысла у затеи

Чего это отнимает? В одну стойку влезет 10 4U корпусов, и ещё останется место рассувать розетки, свитчи и прочее сопутствующее оборудование. Сколько места они займут без неё?

проще и дешевле тогда взять обычный, НОРМАЛЬНЫЙ корпус для условной настолки

Разница в цене там несущественная. Насчёт проще - если у тебя всего 1 комп то да, стойка ему не нужна. Если много - в стойке они будут занимать меньше места и будут удобнее в обслуживании. И совершенно не важно, какое внутри железо и какая цель использования, обычный бытовой десктоп для браузера и игр тоже при прочих равных удобнее засунуть в стойку, если он не единственный.

firkax ★★★★★
()
Последнее исправление: firkax (всего исправлений: 2)
Ответ на: комментарий от mumpster

а какой тогда в них смысл? переплатить за стоечное исполнение?

Смысл только в вертикальном наполнении т.е. думал большую компактность получить

Но спасибо за ответ, думал что хотя бы в u4 проблем не будет со звуком =(

AntonyRF ★★★★★
() автор топика
Ответ на: комментарий от AntonyRF

ну почему. если целенаправленно заняться, то можно и карлсоны нешумные найти, для 4U варианты есть.

просто это всё будет недёшево и под заказ (дольше). а 4U хорош тем что можно туда всё стандартное пихать, не задуряясь. в т.ч. БП (!)

и с вентиляцией (!!!) и всем прочим особо проблем не будет. про это очень часто забывают, а ведь отвод тепла - это первое о чём надо думать.

поищи тогда б/у стойки, хотя можно и новые - самое дешёвое раньше было СТэк из Томска, открытые, хз, живы ли они ещё, у меня бывал такие, даже и на личные деньги покупал. без изысков, но для твоих целей вполне сойдёт. и можно ещё полку взять под мелочь и десктопы. туда же можно пилоты под стойку взять - это удобно. ещё бывают PDU с управлением розетками, но это уже барство для дома ))))

mumpster ★★★★★
()
Ответ на: комментарий от gagarin0

У меня еще была идея Minisforum ultra 192gb использовать, тогда возможно мини рак выйдет сделать. Они как вышли были по какой-то причине по 200к с таким обьемом памяти, а сейчас около 400к =( В таком раскладе получается дешевле sp3 сервер собрать и уже 8 канал и обычная серверная память подходит вместо so-dimm ecc:

Мать H12D-8D или H12SSL - около 70к ЦП 7513 - около 100к Корпус - 20к-30к

AntonyRF ★★★★★
() автор топика
Ответ на: комментарий от firkax

А у него всего один корпус? Я думал много и есть. Если и правда один, то ради одного стойку конечно незачем делать.

Для норм Proxmox кластера надо 3 как минимум ноды, можно 2 но там костылить надо + switch + хранилище надо организовать hdd\ssd пулы, но их можно по нодам раскидать

AntonyRF ★★★★★
() автор топика
  • Markdown
Пустая строка (два раза Enter) начинает новый абзац. Знак '>' в начале абзаца выделяет абзац курсивом цитирования.
Внимание: прочитайте описание разметки Markdown.
Используйте Ctrl-Enter для размещения комментария