Месячник КРЕЯ и КРАСНОГО КРЕЯ (Электроника СС БИС)

[1500py470.livejournal.com]

Оригинал взят у 1500py470 в Месячник КРЕЯ и КРАСНОГО КРЕЯ (Электроника СС БИС)

2-й, надеюсь ежегодный, часть x'18

День рождения Деда мороза

18 ноября в России официально празднуют день рождения Деда Мороза. Злые языки из ТАСС заявили 14 ноября – С начала текущего года капитализация фондового рынка России сократилась на 268 миллиардов долларов, до 498 миллиардов долларов. При энтом в мире происходит некая полная непонятка – рыночная стоимость компании Apple выросла на 192 миллиарда долларов и достигла 661 миллиарда долларов за этот период (крайне любопытно это благодаря или вопреки коминг ауту Тима Кука?). Вкурить в такие события не могу :( Могу только запомнить. Поэтому поговорим о том, что "Cray Research was primarily a refrigerator company"

На фото мы видим куда вылетают тотально все результаты работы любого CRAY -> в оконцовке в виде тепла с крыши в атмосферу земли оставляя свой жирный углеродный след через всю экологию США. Брюсу Уилису и Стивину Сегалу здесь не место!

Глядя на фото те кто думает об охлаждении зала кондиционерами глядя на отверстия в полу, те плохо думают за Америку.



Пускай уровень суровости нонче не тот, что раньше с иммерсионным охлаждением, но жидкости и сейчас используют :)





Вот так без спешки квалифицированные сантехники работают, здесь женщины монтажницы однозначно хуже.





Все эти хвосты уберут позже, аккуратно подключат по месту в стойках.



И подключат вот к таким модулям




Ныряем под пол...



Ввод 250 трубы с водой (у них 10 дюймов) для холодильной установки.



Помпы для циркуляции между холодильной установкой внизу и стойками наверху



Андрей holodilshik оценит теплообменики



Можем полюбоваться на управление



А как тут без воды? Ведь не туды и не сюды :)



Оцените отстойник, тема водо подготовки к сожалению по моему недостаточно раскрыта в этом посте, но будет освещена в следующем году.



отсюда 4,1 МВт электроэнергии проходя через много всякой разной высоко и не очень технологичной техники в оконцовке превращаются в тепло выбрасываемое с крыши в атмосферу земли.

Таким образом уважаемый nabbla1 может убедится, что Брюсу Уилису тут не место лазить сквозь вентиляторы, ибо сухие градирни в эксплуатации дешевле, и сквозь крышу в помещение идут только трубы с циркулирующей жидкостью и штатные входы/выходы для персонала под штатной охраной, а не путе проводы для разной биологической и террористической угрозы в лице всемогущего Брюса, вот такая жизнь ВЦ в штатах без голивудских прикрас. И Сигалы Стивены разные не борются с ВЦ как с загрязнителями природы, по причине отсутствия видимых разливов нефти вокруг них :( Мокрые градирни для таких дел не применяют ибо они вдвое дороже в эксплуатации чем сухие, а нам всем хорошо известно:


"Обеспечте капиталу 10% прибыли, и капитал согласен на всякое применение, при 20% он становится оживленным, при 50% положительно готов сломать себе голову, при 100% он попирает все человеческие законы, при 300% нет такого преступления, на которое он не рискнул бы пойти, хотябы под страхом виселицы"


Для гиков как делали это раньше в добрые старые времена:


Keeping it cool - Месячник КРЕЯ и КРАСНОГО КРЕЯ (Электроника СС БИС) – 7

Computer Security Day и итоги - Месячник КРЕЯ и КРАСНОГО КРЕЯ (Электроника СС БИС) – E

Comments

[web-andyay.livejournal.com]

псто в техническом сообществе без технических подробностей- напуркуа?
где внутристоечные, если я правильно понял, теплообменники?
чем это лучше, чем чиллер?
что делать, если вода потечет в стойку?

[1500py470.livejournal.com]

к сожалению судя по комментариям в основном скучающие креаторы, продовцы и логисты с философами любителями :( В каждом модуле внутри стойки свой вход/выход под не токопроводящую жидкость BLUE WATERS, это банальный дисителят или своя химия как во времена 3M FC-74 не знаю. Про чилер вы прикалываетесь или не понимаете/не можите сформулировать своего вопроса? Когда происходит протечка срабатывает сигнализация, секция отсекается от системы, идёт спасение данных и переконфигурация системы, остатки жидкости сливаются под пол, проводится ремонт, повторное заполнение системы, опресовка более высоким давлением ряда стоек, после успешных испытаний вввод стойки в конфигурацию машины.

[web-andyay.livejournal.com]

эксплуатируя массово чиллерные и фреоновые системы искренне не понимаю, какой КПД заставит владельца ЦОД устраивать а) такой дорогой монтаж б) такие танцы с бубнами в случае протечек.
и как можно объяснить клиенту, что "потечет- мы, наверное, сервер спасем"

[1500py470.livejournal.com]

стойка у ХЕ6 потребляет больше чем установка для производства феритов или электростали с одинаковым размером, плотность энергии выше в единице объёма, а рабочая температура нужна много ниже температуры плавления металлов. При десятках или сотнях тысяч лезвий поломки происходят постоянно, и автоматическое переконфигурирование системы это гигеиническое требование, очень часто работает только часть машины или конфигурируется несколько разных суперкомпьютеров для работы над разными задачами. Оборудование останется работать, протечка это штатная ситуация, снизится производительность машины и всё. Этот объём тепла может быть возможно водородом вынести наружу из зала, но не воздухом, нонешние системы охлаждения много проще чем применялись раньше.

[web-andyay.livejournal.com]

все выше сказанное говорит о том, что для коммерческих ЦОД это неприменимо. :/

[1500py470.livejournal.com]

Это короткий иллюстрированный рассказ про ОДНУ МАШИНУ, а не ЦОД с многими, надеюсь читатели увидели разницу. Если будет плотность монтажа как в ЦОД то объём будет в разы больше -> расстояние между нодами больше -> производительность ниже :( внизу есть ссылка на прошлогодний пост, в нём ссылка на сайт энергетического института с набором данных для расчётов систем охлаждения с использованием минеральных масел итд.

[web-andyay.livejournal.com]

я ее смотрел, что мало что понял

[22sobaki.livejournal.com]

>не токопроводящую жидкость

О как. Такой жидкостью можно тушить электроустановки под напряжением?

[1500py470.livejournal.com]

Можно но не долго, пока с солями итп не смешается :( если тушить методом залить пожар с головой то без проблем, а вообще например "дешевый FC70 стоит 200 долларов за литр, для больших ВЦ при их объёмах используют специально подготовленную деионизированую воду в силу её меньшей цены.

[1500py470.livejournal.com]

(http://ic.pics.livejournal.com/1500py470/62383590/383643/383643_original.jpg)

Добавил для тех кто не читал прошлых постов месечника

[sir66.livejournal.com]

На самом деле правильно сделанная вода течет гораздо реже, чем кондиционер ломается. А последствия для серверов примерно одинаковые - если вовремя не выключить с больой вероятностью сдохнут от перегрева, многие необратимо.

[1500py470.livejournal.com]

Согласен, по сигналу аварии ещё частоту сбрасывают когда переходят на режим аварийной переконфигурации

[web-andyay.livejournal.com]

Для этого есть tier-3: все системы n+1.

[1500py470.livejournal.com]

Охлаждение жидкостью или иммерсионное дешевле чем через воздух при высокой плотности энергии в единице объёма плюс это позволяет сократить длину межсвязей и поднять производительность. Задачи построения рекордных машин и датацентров разные. В датацентрах много владельцев многих машин в вц одна или несколько машин у одного владельца/ов и экономика другая.

[web-andyay.livejournal.com]

Уже понял, спасибо.

[garten-besitzer.livejournal.com]

Как можно на Nikon D300s так хреново снимать? Ужасное качество, кроме первых двух фотографий, которые вообще стырены из интернета. Цель поста - попиарить свой жж? Нафига в engineering-ru рассуждения про капитализм и Брюса Уилиса?

[1500py470.livejournal.com]

Цель привлечь людей к истории ВТ и посмотреть немного по другому на жизнь, вам наверное лучше не напрягаться, а смотреть на высокохудожественные фото гидроприводов итп получая эстетическое наслаждение. Надеюсь читатели увидят, что есть машины посложнее ПК, и системы больше их родной серверной стойки.

[garten-besitzer.livejournal.com]

А нафига такой первый абзац? Я вообще не понял о чем пост. Лучше бы объяснили, что это за холодильник и нафиг он нужен. Не все специалисты в холодильном оборудовании. Или этоохлаждение суперкомпьютера CRAY?

[1500py470.livejournal.com]

Да всё это нужно чтоб охладить одну машинку CRAY XE6 на сегодня номер 34 в топ 500, вводные слова логичны в рамках всех постов месечника который вы к счастью не читали, специальную редакцию для ищущих душ с богатым внутренним миром читающих это сообщество у меня к сожалению нет времени :(

[andrey-yurin.livejournal.com]

Да ладно снимать криво. А предложения типа:
"Глядя на фото те кто думает об охлаждении зала кондиционерами глядя на отверстия в полу, те плохо думают за Америку."
Турбулентный поток сознания просто очарователен.

[1500py470.livejournal.com]

Отверстия нужны для ламинарного потока воздуха в помещении чтоб жить без пыли и уборщиц, а также было куда без луж протекшим стойкам стечь.

[vzanuda.livejournal.com]

Вопрос только в теплообменниках и большом накопителе?

[1500py470.livejournal.com]

У кого?

[livejournal.livejournal.com]

Здравствуйте! Ваша запись попала в топ-25 популярных записей LiveJournal северного региона. Подробнее о рейтинге читайте в Справке (https://www.dreamwidth.org/support/faqbrowse?faqid=303).

[vusk.livejournal.com]

^
ответ на вопрос зачем вообще нужна эта запись

[1500py470.livejournal.com]

Шаману нужно знать, что ежи хотят просвятить, что происходит за стенами ВЦ даже ежей забравшихся на дерево.

[bad-cmpany.livejournal.com]

Это похоже на пост-загадку в этом сообществе.
Только обычно загадка в фото. Тут как раз на фото все ясно, а вот кто бы мне текст перевел на русский.

[vaquero1978.livejournal.com]

мне нравится как сделано охлаждение транса на последней фотографии

[sir66.livejournal.com]

Мои очень древние мысли на ту же тему.

http://sir66.livejournal.com/1329.html

[1500py470.livejournal.com]

Были более эффективные системы в прошлом с имирсионым охлаждением и с системы с охлаждением за счёт фазового перехода, но сейчас готовых их строить руками, а не быть за всё хорошее против всего плохого не вижу :( вот web_andyay посмотрел на табличку с данными для расчёта систем охлаждения на основе FCxx итп материалов и рапортует, что не понял, а чтоб серийно производить оборудование нужен коллектив тех кто вкуривает :((