5. Справка

О принципиальной разнице между архитектурой отказоустойчивого и высокопроизводительного кластера (кластеры под управлением OpenVMS не в счет). Высокопроизводительный кластер строится для массивно-параллельной обработки данных, отказоустойчивость в нем реализуется иными средствами, начиная от batch-scheduler’ов и заканчивая механизмом сохранения контрольных точек. Современный подход к построению таких кластеров заключается в простой формуле: дешевый узел + быстрый интерконнект. Высокопроизводительные кластеры могут достигать гигантских размеров — сотен узлов и десятков тысяч процессоров. Выход из строя одного узла приводит к едва заметному падению производительности: система немедленно перезапустит параллельный процесс на другом доступном узле. Классический отказоустойчивый кластер — это обычно двухузловой кластер, соединенный дублированными путями с системой хранения данных посредством оптического интерфейса FC (heartbeat, разумеется, обязателен). Вариантов множество: от нативных кластерных расширений операционных систем до специализированных продуктов сторонних производителей. Главное, соблюдать разумность выбора.

6. Системы жизнеобеспечения

Говоря об обеспечении бесперебойного электропитания, необходимо поднимать большой пласт инженерных систем или систем жизнеобеспечения. Поэтому упомянем лишь наиболее важные из них: система выделенного электропитания, вентиляции и кондиционирования, автоматической пожарной сигнализации, газового пожаротушения (применяется в помещениях ЦОД). В любом ЦОДе таких систем не один десяток и практически все они затрагивают не только IT, но то, что связано с согласованием и получением разрешений в различных регулирующих органах: БТИ, Госпожарнадзоре, ЦГСН (СЭС), РАО «ЕЭС» (Мосэнерго, Ленэнерго и т. д.). Тем не менее рассматривать их нужно в комплексе, поскольку системы эти сильно интегрированы с планируемым/эксплуатирующимся оборудованием. Если предполагается развертывание нового ЦОДа, необходимо закупать инженерные системы вместе с новым оборудованием. Если намечена модернизация, потребуется либо учитывать все ограничения, накладываемые системами жизнеобеспечения, либо предусматривать и их модернизацию или расширение. Известен случай, когда новый ЦОД не могли запустить в эксплуатацию в течение полугода из-за отсутствия нормального заземления в здании старой постройки. Каждый мог бы привести не один пример, как при наращивании вычислительного оборудования устанавливалась дополнительная бытовая сплит-система для обеспечения отвода тепла от работающего оборудования, или вспомнить о том, что на столах у эксплуатационщиков разбросан с десяток пультов управления десятком же разных (!) кондиционеров.

В крупных городах уже возникли сложности с подводом электроэнергии, поскольку имеется дефицит разрешенных мощностей. Причем такое ограничение всегда было и остается жестким. Компьютерная индустрия существует около 30 лет, и только в последнюю пятилетку все без исключения производители оборудования серьезно озаботились проблемой снижения энергопотребления и уменьшением физических размеров выпускаемой ими техники. С ростом плотности «упаковки» вычислительного оборудования возникла еще одна проблема — отвод тепла. Более 90% потребляемой мощности рассеивается в виде тепла (остальная энергия преобразуется в работу дисков и вентиляторов). Полностью укомплектованная стойка может рассеивать до 20 кВт. Некоторые производители предлагают сейчас использовать экзотические решения с так называемой «холодной дверью» (дверь-теплообменник). В качестве хладагента в них используется обычная вода. Такое решение позволяет отвести до 30% тепла и сэкономить столько же на электроэнергии для кондиционеров. Однако есть и оборотная сторона, тоже проблемная, — обычная вода из водопровода не подходит для подобных систем. Поэтому при креации современных ЦОДов, рассматривая возможность применения нетрадиционных решений с «холодной дверью», необходимо предусмотреть еще одну инженерную систему — систему подготовки технологической воды. Вода в ЦОДе! Как оказывается, ничего страшного в этом нет. В 90% помещений, отведенных вашими заказчиками под ЦОД, вы найдете…трубы центрального отопления.