Проектирование и монтаж ЦОД

Центр обработки данных — от проектирования до реализации

ЦОД. Проектирование и монтаж

Проектирование ЦОД – важный этап, на котором происходит разработка оптимальной модели будущего вычислительного комплекса. Это один из ключевых этапов проекта. Ошибки и просчеты проектировщика не допустимы, поскольку в дальнейшем всегда приводят к серьезным эксплуатационным расходам компании-владельца.

Монтаж подсистем ЦОД – не менее важная задача, чем проектирование. В серверной инфраструктуре любого вычислительного комплекса обычно насчитывается несколько десятков функциональных узлов и конструктивных элементов разного назначения. Без соблюдения отраслевых стандартов качества здесь не обойтись. Несоблюдение стандартов может привести к серьезным просчетам в планировании архитектуры кабельной и электрической сети.

Экспертное проектирование и монтаж всех подсистем ЦОД

Заказывая услугу проектирования и построения ЦОД в ИЦ Телеком-Сервис вы получите весь комплекс услуг по строительству и сопровождению ЦОД от одной компании, ЭТО:

  • Подготовка технико-коммерческого предложения и технический пресейл по всем инженерным системам
  • Экспертное проектирование и монтаж систем: СКС, ЭОМ, СКУД, СОТ, СГПТ, мониторинг, фальшполы, система размещения оборудования, промышленные системы кондиционирования, системы автоматизации и диспетчеризации
  • Экспертный контроль работы субподрядчиков по проектированию систем вентиляции и кондиционирования
  • Монтаж, пуско-наладка и приемо-сдаточные испытания инженерных систем: СКС, ЭОМ, СКУД, СОТ, мониторинг, фальшполы, система размещения оборудования, система автоматизации и диспетчеризации
  • Контроль действий субподрядчиков по монтажу, пуско-наладке и приемо-сдаточными испытаниями по системам вентиляции, кондиционирования и системе пожаротушения.
  • Подбор, поставка и инсталляция СХД и серверов с гарантией от производителя.
  • Выполняем техническое сопровождение установленных систем. Мы создали несколько Пакетов Услуг по техническому обслуживанию, причем каждый Пакет клиент по мере необходимости может дополнить разовыми услугами.

Самым важным вопросом проектирования и создания ЦОД является разработка концепции будущего вычислительного комплекса и оптимальных способов ее реализации.

Успех проектирования оптимальной модели дата-центра зависит от ряда важнейших факторов:

  • качественное проведение экспертизы объекта
  • подготовка проектных документов и согласование их Заказчиком
  • расчет общей производительности информационной системы и ее отдельных подсистем
  • расчет мощностей и показателей инженерных подсистем
  • предварительная планировка помещений
  • создание объемной модели центра обработки данных с определением местоположения отдельных подсистем
  • учет требуемого уровня масштабирования
  • оптимальная унификация инженерных и серверных систем комплекса
  • сокращение бюджетов компании на модернизацию ЦОД.

Для компаний с ограниченным бюджетом на развитие
серверной инфраструктуры предлагаем готовые решения для ЦОД!

Инсталляция и монтаж программно-аппаратно обеспечения и оборудования

ИЦ Телеком-Сервис надежно и качественно выполнит также весь комплекс работ по инсталляции и монтажу аппаратно-программного обеспечения и оборудования разных инженерных подсистем:

Преимущества работы
с сетевым интегратором
ИЦ ТЕЛЕКОМ-СЕРВИС:

  • Опыт РАБОТЫ
    в сетевой интеграции
    БОЛЕЕ 20 ЛЕТ
    (с 1995 года)
  • Большой опыт создания
    СКС и инженерных
    систем для ЦОД
  • Большой опыт
    Генподрядных работ
    и шеф-монтажа
  • Строгое
    СОБЛЮДЕНИЕ
    отраслевых
    СТАНДАРТОВ качества
  • Использование
    ТОЛЬКО ВЫСОКОНАДЕЖНОГО ОБОРУДОВАНИЯ
    российских и мировых
    производителей
  • В штате сотрудники
    обладающие высокой
    компетенцией
    (у сотрудников
    компании более
    200 именных
    профессиональных
    сертификатов)
  • ГАРАНТИИ на
    будущее – возможность
    масштабирования и
    изменения топологии
    ЦОД
  • КАЧЕСТВЕННЫЙ МЕНЕДЖМЕНТ
    проекта на всех
    стадиях разработки
    и внедрения

Стандарты строительства и проектирования ЦОД

Профессиональные системные интеграторы при проектировании центров обработки данных — используют требования международных отраслевых стандартов, позволяющих максимально снизить количество ошибок в процессе проектирования.

Стандарты созданы с учетом общемирового опыта проектирования и эксплуатации ЦОД и серверных помещений разного типа, и специфицируют более десятка взаимосвязанных инженерных подсистем ЦОД.

Действующие стандарты ЦОД

  • CENELEC/EN 50173?5.200Х – европейский стандарт построения СКС ЦОД
  • ISO/IEC 24764 — международный стандарт, определяющий стандарты построения структурированной кабельной системы в ЦОД.
  • TIA/EIA-568-B — набор из трёх телекоммуникационных стандартов, выпущенных Ассоциацией телекоммуникационной промышленности США. Новая версия устаревшего стандарта TIA/EIA-568-А. Группа стандартов описывает создание телекоммуникационных структурированных кабельных систем в зданиях.
  • ГОСТ Р 53246-2008 — Информационные технологии. Структурированные кабельные системы. Проектирование основных узлов системы. Общие требования. Правила устройства электроустановок, шестое издание, с изм. и доп., Госэнергонадзор, Москва, 2000.
  • СН-512?78 – Строительные нормы. «Инструкция по проектированию зданий и помещений для электронно — вычислительных машин». Российский документ, регламентирующий строительство дата-центра.
  • EIA/TIA-942 – американский телекоммуникационный стандарт построения дата-центров, определяющий уровни энергопоснабжения.
  • EN 1047?2 — европейский стандарт по физической защите данных. «Защищенные хранилища. Классификация и методы тестирования. Комнаты и контейнеры для хранения баз данных». Стандарт определяет уровни защиты от высокой температуры и влажности, задает возможный временной период остывания после нагрева.

Группа стандартов, определяющих требования к помещению ЦОД

  • DIN EN 60529?2000 – стандарт, определяющий требования по просачиванию воды
  • DIN 18095 – стандарт, определяющий действия по предупреждению проникновения дыма или газа
  • DIN V 18103– стандарт, описывающий необходимые меры защиты от взлома
  • EN 50147 – стандарт, определяющий методы экранирования от электромагнитного излучения помещений дата-центра.

В стандартах для ЦОДов четко прописаны показатели, которые следует учитывать при планировании и подготовке монтажа сетевых, кабельных и инженерных подсистем ЦОД. Приложения стандарта TIA-942 например, содержат определения большого количества параметров различных групп. Соблюдение требований к рабочим параметрам будущего ЦОД значительно облегчает работу проектировщика и позволяет разработать оптимальную модель дата-центра.

По требованиям европейских стандартов к проектированию ЦОД для сбора объемной статистики, штат специалистов, участвующих в проекте подразделяется на проектную и эксплуатационную группы.

В России принята иная практика. У нас активно используют проектные расчеты международных организаций, основанные на мировом опыте внедрения дата-центров. Например, передовой опыт Uptime Institute, доступ к которому открывается российским специалистам на ежегодных семинарах, конференциях и тренингах.

Режимы функционирования дата-центров

По действующей международной классификации режим функционирования ЦОД должен соответствовать одному из четырех уровней бесперебойной работы.

Первый уровень — уровень готовности 99,6%

На первом уровне предполагается режим простоя не более 29 часов в течение года. К ЦОД 4-го уровня предъявляются наиболее жесткие требования, согласно которым допустимый простой Центра может составлять не более 15-ти минут в год. На данном уровне используется максимум возможностей для решения задач полноценного резервирования данных и обеспечения бесперебойного функционирования всех систем.

Действуют также требования к помещениям ЦОД. Центры обработки данных III -го и IV -го уровней надежности должны располагаться в отдельных зданиях, а системы первого и второго уровня могут занимать отдельной помещение в структуре офиса компании.

По требованию к бесперебойной подаче электроэнергии в ЦОД старшего поколения (III, IV уровень) должны обеспечиваться, как минимум, двумя автономными источниками электроэнергии. Поэтому при монтаже инженерных систем ЦОД важно качественно и профессионально выполнить монтаж резервных систем электропитания.

Кроме вышеперечисленных, существует ряд дополнительных факторов, определяющих качественную работу дата-центра.

Требования к помещениям цодов

Направления деятельности

Зачем нужны стандарты проектирования ЦОД

Все большую важность приобретает выработка единого подхода к организации ЦОД. Стандартизация должна способствовать консолидации инфраструктуры, уменьшению ее сложности, повышению управляемости, соответствию требованиям бизнес-процессов и сокращению затрат. Стандарты обобщают опыт, накопленный в ходе построения и эксплуатации различных центров данных и серверных помещений, стимулируют системный подход к реализации инфраструктуры, приводя тем самым к предсказуемой тиражируемости и масштабируемости решений, помогают унифицировать реализацию взаимосвязанных инфраструктурных систем и упростить внесение изменений.

Стандартизация рассматривается как один из принципов системного подхода к построению инфраструктуры, обеспечивающий масштабируемость решений и сокращение капитальных расходов. Она помогает унифицировать реализацию взаимосвязанных инфраструктурных систем ЦОД.

Стандарты определяют, какие факторы следует учитывать при планировании и подготовке монтажа ЦОД (или другой серверной инфраструктуры), включая архитектурный проект, электроснабжение, заземление, различные инженерные коммуникации. Стандарты ЦОД специфицируют более десятка взаимосвязанных подсистем, что позволяет выработать единый подход к реализации инженерной инфраструктуры и снизить число возможных ошибок.

Какие организации разрабатывают стандарты для ЦОД

За рубежом есть организации, объединяющие специалистов по построению и эксплуатации центров данных. Например, Institute for Data Center Professionals (IDCP) разрабатывает стандарты на инфраструктуру ЦОД и накапливает обширную статистику. В России действующих ЦОД еще слишком мало, чтобы делать обобщения, но можно использовать зарубежные опыт и модели расчетов, например Uptime Institute. Проходящие в нашей стране конференции позволяют знакомиться с достижениями в этой области, с вариантами реализации ЦОД, в которых учитывается специфика деятельности предприятия и решаемых задач.

Какие стандарты используются в проектировании ЦОД

В настоящее время проектировщики руководствуются американским стандартом EIA/TIA-942 («Стандарт на телекоммуникационную инфраструктуру центров обработки данных»). Близок к завершению его европейский аналог EN 50173−5, на основе которого формируется и российский ГОСТ.

Американский стандарт ANSI TIA/EIA-942 (TIA-942) «Telecommunications Infrastructure Standard for Data Center» был утвержден в апреле 2005 г. Пока это единственный комплексный стандарт, где освещается широкий круг вопросов, связанных с организацией ЦОД. Он предлагает последовательный подход к решению задач по созданию ЦОД. Комплексных европейских и международных аналогов не существует, однако, как предполагается, ISO возьмет его за основу при разработке соответствующего международного стандарта. Для ряда американских стандартов, входящих в ANSI/EIA/TIA-942, имеются международные аналоги. Так, например, аналогами ANSI/TIA/EIA-568 (Commercial BuildingTelecommunications Cabling Standard, Implementationof Telecommunications Enclosures, Additional Cabling Guidelines for DTE Power) являются ISO 11801и европейские EN 50173, EN 50174 (Comite Europeen de Normalisation Electrotehnique, CENELEC). Стандарт обобщает многолетний опыт создания ЦОД. Следование его рекомендациям позволяет максимально приблизиться к уровню надежности с заветными пятью девятками — 99,999%. Ряд требований следует принять в качестве постулата. Специалисты руководствуются также европейским стандартом CENELEC/EN 50173−5.200Х, принятие которого ожидается в этом году. Стандарт TIA-942 описывает общую структуру, основные элементы и топологию ЦОД и охватывает все разнообразие подсистем ЦОД, включая систему электроснабжения. К сожалению, до сих пор не существует единого российского ГОСТа, где были бы определены требования к ЦОД.

Стандарты энергоснабжения ЦОД

На практике при расчете системы энергоснабжения подобных объектов проектировщики руководствуются действующим на территории РФ регламентирующим актом «Правила устройства электроустановок (ПУЭ)». Этот документ выделяет категории надежности электроснабжения (объекты I, II категории и объекты особой группы первой категории) и дает общие рекомендации по обеспечению каждого из уровней.

Стандарт TIA-942 определяет четыре уровня бесперебойной работы ЦОД. Первый уровень составляет 99,67 %, что соответствует запланированному времени простоя не более 28,8 часов в год. Уровень надежности ЦОД IV класса составляет 99,995 %, что означает суммарный перерыв в работе не более 15 минут в год. В отличие от первого уровня четвертый предполагает полное резервирование. На практике даже при значительном улучшении дизайна компьютерного оборудования ЦОД, построенные за последние пять лет и заявляющие функциональность IV уровня, в действительности часто соответствуют I, II и III уровню. Центры первого и второго класса могут занимать часть какого-либо помещения, а объекты III и IV класса размещаются в отдельных зданиях.

Требования к энергетической системе ЦОД IV уровня надежности также предусматривают полное резервирование. Такой центр должен быть оснащен как минимум двумя полностью независимыми электрическими системами, начиная от фидеров электропитания и входных магистралей от провайдеров услуг связи и заканчивая дублированием блоков питания серверных лезвий. Основные положения стандарта TIA 942 в части, касающейся энергоснабжения ЦОД:

  1. помещение для ввода кабелей (Entrance Room) в базовой топологии оно одно, но может быть и несколько
  2. главный распределительный пункт (Main Distribution Area, MDA), где расположен центральный кросс кабельной системы ЦОД, маршрутизаторы, коммутаторы локальной сети и сети хранения данных. Там же могут размещаться и кроссы, предназначенные для коммутации горизонтальных кабелей. Для целей резервирования в ЦОД может быть организовано два и более
  3. пункт распределения горизонтальной подсистемы общей кабельной системы ЦОД (Horizontal Distribution Area,
  4. распределительный пункт зоны (Zone Distribution Area, ZDA), наличие которого расширяет возможности по реконфигурации системы
  5. область размещения компьютерного оборудования (Equipment Distribution Area, EDA).
Стандарты структуры СКС ЦОД

В стандарте подробно описывается структура кабельной системы ЦОД, начиная с магистральных каналов и заканчивая розетками, устанавливаемыми в EDA. Ограничения накладываются на типы используемых кабелей и их длину. Кроме того, он охватывает целый круг вопросов, связанных с организацией центра обработки, таких, как электроснабжение и безопасность (последняя включает множество направлений).

Стандарты строительства ЦОД

Российский документ СН-512−78 (строительные нормы) «Инструкция по проектированию зданий и помещений для электронно¬вычислительных машин», последняя редакция, февраль 2000г. интересен с точки зрения общего подхода, а также ссылок на действующие СН и СниП. При проектировании нор¬мируемые параметры можно уточнить, обратившись к действующим ГОСТам, МГСН, НБП, РД и другим документам отечественной нормативной базы.

Стандарты защиты информации ЦОД

Важнейшеий европейский стандарт по (физической) защите информации — EN 1047−2 «Защищенные хранилища. Классификация и методы тестирования. Комнаты и контейнеры для хранения баз данных». Этот стандарт определяет классы защиты от высокой температуры и влажности, а также нормируется период остывания после нагрева.

Стандарты и требования к помещению ЦОД

К ЦОД предъявляются также требования по предупреждению проникновения дыма или газа (DIN 18095) и просачивания воды (DIN EN 60529−2000), защиты от взлома (DIN V 18103), а также по экранирова¬нию от электромагнитного излучения (EN 50147) и ряд других. Именно они оказывают определяющее влияние на конструктивные особенности поме¬щений ЦОД.

Технические требования к Центру обработки данных

к Протоколу Тендерного комитета

от __________________ № ____

Технические требования к Центру обработки данных

1 Общие сведения. 1

2 Предназначение и цель создания ЦОД. 1

2.1 Предназначение ЦОД. 1

2.2 Цель создания ЦОД. 2

3 Требования к ЦОД. 2

3.1 Общие требования к ЦОД. 2

3.2 Гарантия и сервисная поддержка. 5

3.3 Требования к помещению.. 5

3.4 Требование к системе электроснабжения. 8

3.4.1 Общие требования к системе гарантированного электропитания ЦОД. 8

Смотрите так же:  Образец искового заявление о разделе квартиры

3.4.2 Требования к дизель-генераторной системе электропитания. 9

3.4.3 Требования к системе бесперебойного питания (СБП) 11

3.5 Требования к системе кондиционирования ЦОД. 13

3.6 Требования к структурированной кабельной системе ЦОД. 15

3.7 Требования к телефонно-кабельной канализации. 17

3.8 Требования к хранению резервных копий. 18

3.9 Требования к внешним каналам связи. 18

3.10 Требования к системе пожарной безопасности. 19

3.11 Требования к системе мониторинга ЦОД. 19

4 Требования к проектированию.. 19

Стадии проектирования. 19

5 Требования к составу и содержанию работ. 21

6 Требования к организации безопасности. 22

1 Общие сведения

Данное техническое задание определяет требования и порядок проведения работ по созданию Центра обработки данных для ПАО «ВТБ Банк».

Полное название системы – Центр обработки данных ПАО «ВТБ Банк».

Краткое название системы: ЦОД.

2 Предназначение и цель создания ЦОД

2.1 Предназначение ЦОД

Комплекс ЦОД предназначен для обеспечения работы оборудования информационных технологий (далее – ИТ оборудование) ЦОД, в соответствии с требованиями к доступности, безопасности, мониторингу и возможностям управления.

2.2 Цель создания ЦОД

а) Физическое размещение в серверной ЦОД ИТ оборудования:

— оборудования систем хранения данных;

— активного и пассивного сетевого оборудования.

б) Обеспечение бесперебойной работы ИТ оборудования в течение заданного интервала времени при исчезновении электрического напряжения на линиях электроснабжения от основных и резервных энерговводов;

в) Техническая защита информации, а также обеспечение достаточной степени защиты ИТ оборудования и информации от внешних электромагнитных излучений и помех;

г) Обеспечение для работы ИТ оборудования климатических условий;

д) Обеспечение возможности мониторинга основных параметров и состояния важнейших компонентов его инфраструктуры, в т. ч. и дистанционного мониторинга (для некоторых систем, возможно, обеспечение возможности дистанционного управления).

3 Требования к ЦОД

3.1 Общие требования к ЦОД

Все компоненты ЦОД и вспомогательную инфраструктуру следует проектировать так, чтобы они могли воспринять будущее наращивание без перерыва в предоставлении услуг.

При разработке проекта ЦОД необходимо обеспечить возможность и способность инфраструктуры объекта позволять любую плановую деятельность без нарушения нормального хода работы критически важной нагрузки, которая представляет собой минимальное количество оборудования и систем ЦОД, достаточное для работы Банка в соответствии с «Положенням про забезпечення безперервного функціонування інформаційних систем Національного банку та банків України», утвержденным решением НБУ . Критически важная нагрузка определяется на стадии проектирования и выражается в процентном отношении к общему количеству оборудования и систем ЦОД. Отказоустойчивая функциональность также обеспечивает способность инфраструктуры объекта выдержать, по крайней мере, один отказ (или событие) наихудшего свойства без последствий для критически важной нагрузки. Эксплуатационная готовность (сохранение функциональности) ЦОД должна обеспечивать способность инфраструктуры объекта выдержать, по крайней мере, один отказ (или событие) наихудшего свойства, что предполагает наличие средств «горячего резервирования» критически важной нагрузки. С точки зрения электрооборудования, это означает наличие двух отдельных систем гарантированного электропитания, в которых каждая система имеет резервирование N+1. Необходимо, чтобы всё техническое обеспечение машинного зала ЦОД имело двойной подвод питания.

Архитектура инженерной инфраструктуры ЦОД должна предусматривать возможность поэтапного масштабирования ИТ-инфраструктуры на длительный период.

Общий уровень надежности ЦОД должен соответствовать уровню TIER 3 стандарта TIA 942 (создан Институтом ANSI, США — прилагается) — возможность проведения работ без остановки ЦОД. Совокупное время вынужденного простоя ЦОД может составлять не более 96 минут в год.

Предложенное решение по созданию ЦОД должно полностью соответствовать требованиям «Правил технічного захисту інформації для приміщень банків, у яких обробляються електронні банківські документи» (затверджені постановою НБУ N 243 від 04.07.2007).

Общими требования для ЦОД являются:

— предельный выделенный лимит электроснабжения объекта (не менее 300 кВт);

— запланированное количество шкафов для ИТ оборудования:

o этап 1 -12 штук,

o этап 2 – 18 штук.

— рабочие мощности потребителей системы бесперебойного питания (согласно раздела 3.3);

— категория взрывопожарной опасности по НАПБ Б.07.005-86: В;

— взрывоопасные смеси на объекте: отсутствуют;

— диапазон изменения температуры в помещении: +18°С … +24°С;

— относительная влажность воздуха при 24°С: от 40 до 60%.

К инженерной инфраструктуре ЦОД предъявляются требования:

— обеспечение полной физической безопасности оборудования с размещенной на нем информацией (защита от пожара, воды и противопожарной жидкости, электромагнитного излучения, несанкционированного доступа, вандализма, пыли, дыма, падающих обломков);

— круглосуточное круглогодичное обеспечение работоспособности оборудования;

— проведение сервисных работ без отключения оборудования;

— соблюдение требуемых для функционирования оборудования климатических условий;

— разделение зон ответственности в зависимости от задач доступа персонала к различным устройствам;

— масштабируемость/переносимость решения в целях наращивания инфраструктуры ЦОД в соответствии с бизнес-процессом Банка;

Общие характеристики инфраструктуры ЦОД приведены в таблице 1.

Общие характеристики инфраструктуры ЦОД

Режим работы оборудования ЦОД

24х7х365 (круглосуточный), в автоматическом режиме, с возможностью оперативного реагирования в аварийных ситуациях круглосуточно дежурящего на Объекте персонала

Категория технических помещений ЦОД (машинный зал, комната для телекоммуникационной, помещения для электрического и механического оборудования ЦОД)

без постоянного присутствия персонала

Оснащение пожарной безопасности

для помещения категории В

Общее энергопотребление ЦОД ( в т. ч. и в перспективе)

не менее 300 кВт

Напряжение питания ИТ оборудования

220В однофазное и 380В, трехфазное, переменного тока (AC)

Время автономной работы оборудования от ИБП, при 90 % нагрузке для 1-2 этапа

не менее 20 мин

Степень резервирования ИБП для питания ИТ оборудования серверной ЦОД

Степень резервирования системы охлаждения (в т. ч. и кондиционирования)

Степень резервирования дизельной электростанции (ДЭС)

Степень резервирования системы распределения питания

Максимальная мощность потребления ИТ-оборудования, находящегося в одном коммуникационном шкафу

не более 6 кВт / шкаф

Количество коммуникационных шкафов 42U, ШхГхВ: 785 x 1326 x 2025 мм

этап 1 – 2, этап 2 – 2

Максимальные мощности потребления шкафов с серверным оборудованием

не более 8 кВт / шкаф

Количество серверных шкафов 42U, ШхГхВ: 785 x 1326 x 2025 мм

этап 1 — 6, этап 2 — 8

Максимальные мощности потребления шкафов с высокопроизводительными системами и хранилищами данных

не более 13 кВт / шкаф

Количество шкафов с высокопроизводительными системами и хранилищами данных 42U, ШхГхВ: 785 x 1326 x 2025 мм

этап 1 — 4, этап 2 — 8

Площадь под один ИТ шкаф

3.2 Гарантия и сервисная поддержка

Гарантийный период на выполненные работы и установленное оборудование должен быть не менее 36 месяца по всем подсистемам ЦОД.

Претендентом обеспечивается полная сервисная поддержка ЦОД и всех его подсистем – организация процесса эксплуатации инженерной инфраструктуры ЦОД, сервисного сопровождения и регламентного обслуживания установленного оборудования. Для выполнения этих работ допускается привлечение внешних компаний.

Претендент, как организация, ответственная за сервисную и эксплуатационную поддержку ЦОД принимает обязательство (включая финансовые санкции при несоответствии) по обеспечению соблюдения общего уровня сервиса относительно обеспечения работы информационной инфраструктуры ЦОД в таком виде, что совокупное время его вынужденного простоя может составлять не более 96 минут в год.

3.3 Требования к помещению

Местонахождение центра обработки данных не определено.

При этом ЦОД не должен быть размещен в зоне с повышенной степенью вероятности возникновения природных или техногенных катастроф, а также в местах, подверженных влиянию техногенных и природных факторов:

— Наводнения внешнего происхождения,

— Снежные бураны/сильные ветра/ ураганы/ торнадо,

— Сейсмически активная территория,

— Повышение уровня воды в реках/ водоемах/ озерах, которое приводит к затоплению значительных территорий и разрушению местности,

— Пожары внешнего происхождения,

— Рассеивание в окружающую среду разных опасных веществ (в т. ч. близость химических/биологических и других предприятий),

— Близость аэропортов, атомных электростанций, дамб, других опасных объектов,

— Повышенное электромагнитное излучение, вибрации,

На рисунке 1 отображены основные помещения ЦОД и взаимосвязи между помещениями

Характеристики помещения, в котором относительно которых проводиться расчет проекта ЦОД:

часть1: экранированное помещение машинного зала с площадью не меньше 60 г. кв.:

— высота потолка — не меньше 4,5 г.,

— максимально допустимая нагрузка на перекрытие — 1200 кг./г. кв.,

часть 2: помещение с площадью не меньше 100 г. кв. для размещения служебных помещений, размещения электрического и механического оборудования ЦОД.

общие требования к помещению ЦОД:

— размещение не выше 2-го этажа,

— наличие грузового лифта (при размещении на 2-м этаже) и пространства для парковки грузового автотранспорта перед зданием,

Помещения ЦОД должны иметь по периметру капитальные стены. Капитальными стенами, перегородками и перекрытиями следует считать такие, которые выполненные из полнотелой кирпичной или каменной кладки толщиной не менее 500мм, бетонных стеночных блоков толщиной 180мм, железобетонных панелей толщиной не менее 180мм.

Внешние стены, перекрытие, пол и перегородки, которые не отвечают вышеуказанным требованиям, из внутренней стороны по всей плоскости должны быть усилены стальной сварной решеткой из арматуры класса А-III диаметром не менее 16мм и размером ячейки 150х150мм, которые потом оштукатуриваются.

Решетка приваривается к стальным анкерам (ершам) диаметром 12мм, которые замуровываются в стены, перекрытие и пол или к закладочным деталям железобетонных конструкций из стальной полосы. Анкера замуровываются на глубину не менее 120мм.

Отверстия размером более 150х150мм в стенах, потолке и полу усиливаются аналогично.

Стеклянные конструкции оконных проемов следует усиливать от несанкционированного проникновения либо закрывать металлическими решётками.
Запасные (тыльные, пожарные) входы-выходы к помещению ЦОД необходимо оборудовать дверьми классом сопротивления не ниже ДЗ-II за ГСТУ 78.11..

Все технологические и серверные помещения ЦОД являются огнеупорными (до 60 минут, что подтверждено соответствующими сертификатами). Системы централизованного питания (электрощитовые) и бесперебойного питания (системы UPS и батареи) размещены в отдельных ппомещениях, которые являются отделенными пожарнозащищенными зонами.

Площади помещений ЦОД приведены в таблице 2.

Площади помещений необходимые

серверное помещение (машинный зал) без учёта площади необходимой для компонентов системы охлаждения (в случаи размещения ее компонентов внутри машинного зала добавить необходимую площадь)

помещение электронного архива

комната(ы) для телекоммуникаций обслуживающих помещения ЦОД

комнаты электрического и механического оборудования

площадь места для установки компонентов ДГУ

площадь места для установки компонентов системы кондиционирования

Рисунок 1. Основные помещения ЦОД и взаимосвязи между помещениями

Претендентом может быть предоставлено предложение о проведении реконструкции или построении административного здания удовлетворяющего требованиям помещения для ЦОД, либо предоставлено предложение готового помещения для потребностей Банка.

Пакет документов по каждому объекту недвижимого имущества должен включать:

— свидетельство на право собственности / договор купли-продажи / договор об удовлетворении требований ипотекодержателя / копия судебного решения или другой документ, подтверждающий изменение владельца;

— акт приемапередачи к договору;

— технический паспорт объекта;

— выписка о регистрации права собственности на недвижимое имущество, выданная Бюро технической инвентаризации(далее — БТИ), или регистрационное удостоверение, выданное БТИ, или реєстационная надпись на правоустанавливающем документе, сделанная БТИ;

— акт государственной комиссии / акт готовности объекта к эксплуатации и серификат (в случае строительства, реконструкции объекта);

— государственный акт на право собственности на земельный участок (при купле-продаже земельного участка).

— справка о нормативной денежной оценке земельного участка

или выипска из технической документации о нормативной денежной оценке земельного участка и план земельного участка (при аренде земельного участка).

-договор аренды земельного участка

— Договор на поставку электроэнергии с приложениями (с информацией о выделенном лимите и схемой подключения).

3.4 Требование к системе электроснабжения

Все элементы системы электроснабжения должны быть выполнены в соответствии с требованиями ПУЭ (Правила устройства электроустановок).

Машинный зал ЦОД оснащается как основной, так и аварийной системой электроосвещения.

3.4.1 Общие требования к системе гарантированного электропитания ЦОД

Система гарантированного электропитания должна состоять из двух основных частей — дизель-генераторной установки (ДГУ) и системы бесперебойного питания (СБП).

Дизель-генераторная установка должна обеспечить гарантированное электропитание основных систем ЦОД в период аварийных ситуаций на городской электросети. СБП должна обеспечить работу основных систем ЦОД на период кратковременных отключений городской электросети (не менее 20 минут) до запуска дизель-генераторной системы.

Система бесперебойного электропитания, должна состоять из двух централизованных подсистем — электропитания критически важного оборудования ЦОД и электропитания оборудования рабочих мест обслуживающего персонала ЦОД. Система бесперебойного электропитания должна не допускать кратковременных перебоев в энергообеспечении и требовательных к качеству питающего напряжения систем центра обработки данных.

3.4.2 Требования к дизель-генераторной системе электропитания

Дизель-генераторная установка аварийного энергоснабжения должна работать без постоянного обслуживающего персонала, с возможностью аварийного ручного запуска из щита, расположенного на ДГУ.

Схема организации ДГУ «2(N+1)». ДГУ должна удовлетворять расчету мощностей, приведенному ниже в таблице 3. Необходимо предусмотреть возможность наращивания мощности ДГУ приведенной в таблице 3, с сохранением схемы организации ДГУ «2(N+1)» (вся пассивная часть ДГУ (прокладка кабелей, установка распределительных щитов и. т.д.) выполняется при вводе в эксплуатацию 1-го этапа).

Потребляемая мощность, кВт

Дополнительные потребители (рабочие места, локальное кондиционирование)

Дополнительные потребители (рабочие места, локальное кондиционирование)

ДГУ должна отвечать отечественным нормативным требованиям.

Акустические параметры, токсичность выхлопных газов двигателя должны отвечать международным стандартам и экологическим нормативам, нормы которых не превышают допустимых норм,
указанных в:

ГОСТ «Выбросы вредных веществ с отработанными газами»;

ГОСТ 12«Вибрационная безопасность»;

ДСН 3.3.6.039-99 «Государственные санитарные нормы производственной общей и локальной вибрации»;

ДСН 3.3.6.037-99 «Санитарные нормы производственного шума и ультразвука»;

ДСП — 201-97 «Государственные санитарные правила охраны атмосферного воздуха населенных мест», «ПДК в воздухе рабочей зоны».

Оборудование должно иметь положительный вывод государственной санитарно-эпидемиологической экспертизы и разрешение Государственного надзора по охране труда Украины.

Обязательное наличие в Киеве сервисного центра производителя ДЭС.

Основные требования к характеристикам ДГУ:

— Вариант исполнения В защищенном корпусе, предназначенном для внешней установки

— Необходимая мощность согласно Таблицы 3

— Номинальное напряжение 400/230 В

— Номинальная частота 50 Гц

— Температурный режим работы +45 / -35 ◦С

— Топливный резервуар не меньше 16 часов автономной работы с индикатором уровня

— Стабильность напряжения на выходе + /- 0,5%

— Коэффициент гармоник не больше 4%

Время запуска и выхода на 100% мощности — определяется на стадии проектирования (но не более 15 минут).

В состав ДГУ должны входить устройства, которые обеспечивают удаленный мониторинг работы системы и ее параметров.

ДГУ должна быть интегрированная в общий комплекс системы управления инфраструктурой объекта.

— определение наличия топлива и его уровень;

— отображение состояние аккумуляторной батареи;

— отображение низкого давления смазочного масла;

— отображение температуры двигателя;

— журнал регистрации неисправностей (название события, количество часов эксплуатации двигателя при первом появлении события, количество часов эксплуатации двигателя при последнем появлении события, частота появления событий);

Смотрите так же:  Заявление о внесении изменений сбербанк россии

— при возникновении аварийных ситуаций производить отсылку сообщений по электронной почте и через операторов сотовой связи на группу пользователей.

Модули ДГУ размещаются вне помещения ЦОД на выделенной площадке (1 этаж) возле здания.

3.4.3 Требования к системе бесперебойного питания (СБП)

Система бесперебойного электропитания (СБП) предназначена для защиты оборудования ЦОД и рабочих станций потребителей и другого оборудования, которое находится в разных помещениях объекта (в дальнейшем ОИТ) от нестабильности сети внешнего электропитания и обеспечения автономного электропитания ответственных потребителей во время отсутствия напряжения во внешней сети.

Общая система бесперебойного электропитания объекта должна состоять из независимой системы СБП для обеспечения гарантированным электропитанием ЦОД (включая систему кондиционирования) и независимой СБП для обспечения питания рабочих мест обслуживающего персонала ЦОД.

В таблице 4 приводится расчет мощностей системы бесперебойного электропитания.

Расчета мощностей СПБ для потребителя — ЦОД

Потребляемая мощность, кВт

Суммарная мощность с учетом этапов

Дополнительные потребители (рабочие места, локальное кондиционирование)

Дополнительные потребители (рабочие места, локальное кондиционирование)

СБП необходимо укомплектовать устройствами удаленного мониторинга работы системы и ее параметров.

СБП должна быть интегрирована в общий комплекс системы управления инфраструктурой объекта.

Для обеспечения автономности работы систем должны использоваться шкафы с герметичными, полностью необслуживаемыми аккумуляторными батареями, расположенные в выделенном помещении.

3.4.3.1 Требования к системе СБП

Оборудование должно быть размещено в помещении объекта.

Система СБП организовывается по принципу резервирования «2(N+1)» (для обеспечения требований расчетной мощности приведенной в таблицах 3-4, функционирующих в режиме параллельной работы).

Вся пассивная часть СБП (распределительные шкафы, шкафы автоматов, провода электропитания, АВР и т. д.) рассчитываются и устанавливаются при монтаже системы исходя из максимальной нагрузки на СБП. Необходимая площадь для размещения полного комплекта СБП (с учетом установки 100 % аккумуляторных батарей и распределительных шкафов при максимальной нагрузке) необходимо указать в техническом проекте.

СПБ должна обеспечивать подачу к оборудованию ЦОД от распределительных шкафов однофазного и трех фазного электропитания.

Бесперебойное электропитание от системы СБП необходимо свести в шкаф параллельной работы. СБП укомплектовывается внешним механическим байпасом, который допускается устанавливать в шкафу параллельной работы и коммутации.

Для подключения системы СБП в отведенном помещении необходимо установить распределительный щит, укомплектованный следующими автоматами:

— вводные автоматы системы

— вводной автомат линии байпаса

— выходной автомат системы

Время автономной работы СБП обеспечивается благодаря аккумуляторным батареям, расположенным в отдельных шкафах.

Время автономной работы системы должно быть достаточным для ввода в эксплуатацию источника резервного электропитания (ДГУ), но не менее 20 минут при 90% загрузке системы СБП (согласно этапов нагрузки приведенных в таблице 4).

3.4.3.2 Требования к оборудованию систем бесперебойного электропитания

Для наивысшей степени защиты оборудования, питающегося от системы, в качестве составляющих частей СБП должны использоваться ИБП со следующими рабочими характеристиками:

— Топология работы ИБП – двойное преобразования напряжения

— Диапазон входного напряжения без перехода на аккумуляторные батареи, В: 400±20%;

— Входной коэффициент мощности: 0,99;

— Выходной коэффициент мощности: 0,9;

— Номинальное выходное напряжение, В: 400/230;

— Номинальная выходная частота, Гц: 50;

— Стабилизация выходного напряжения при стабильной/нестабильной нагрузке: ±1%/±5%;

— Коэффициент нелинейных искажений входного тока: не более 5%;

— Стабилизация частоты на выходе, Гц: синхронно с сетью +/-0,5/ 1 / 2;

— КПД при 100% нагрузке: не менее 93%;

— Система охлаждения — выдув вверх отработанного воздуха;

СБП необходимо укомплектовать системами дистанционного мониторинга и управления.

Развернутая система мониторинга СБП должна отвечать следующим требованиям:

— отслеживание параметров состояния аккумуляторных батарей

— отслеживание параметров входящего и исходящего напряжения

— отслеживание нагрузки на каждом выходных автомате к серверным стойкам

— отображение климатических параметров помещения СБП

— журнал регистрации неисправностей (название события, количество часов эксплуатации двигателя при последнем появлении события, частота появления событий)

— определение наличия топлива и его уровень

— автоматическая отправка сообщений по электронной почте и через операторов сотовой связи на группу пользователей при возникновении аварийных ситуаций.

3.5 Требования к системе кондиционирования ЦОД

В ЦОД необходимо предусмотреть использование двух раздельных систем кондиционирования: помещения машинного зала и офисных, рабочих и вспомогательных помещений. Требования к системе кондиционирования офисных, рабочих и вспомогательных помещений определяются в рамках общих строительных работ. Система кондиционирования помещения машинного зала организовывается по схеме резервирования «2(N+1)» и должна обеспечивать охлаждение вычислительного оборудования с поддержкой следующих параметров микроклимата: температура 20±20С, относительная влажность 40-60%.

Система должна сохранять работоспособность в следующем диапазоне наружной температуры воздуха: от -35 до +45 0С.

Для создания эффективной циркуляции воздуха в помещении при размещении стоек с серверным оборудованием использовать принцип чередования холодных и горячих коридоров. Среднее тепловыделение серверной стойки с вычислительным оборудованием составляет 9,42 кВт (24% с тепловыделением 6 кВт, 38 % с тепловыделением 8 кВт, 38 % с тепловыделением 13 кВт).

Подача охлажденного воздуха должна осуществляться к фронтальной части стоек с вычислительным оборудованием.

Система кондиционирования должна обеспечивать следующие возможности:

— вывод сигналов аварийной работы кондиционеров на централизованный пульт световой и звуковой сигнализации (место установки — указывается Заказчиком);

— возможность дистанционного контроля состояния кондиционеров через порт Ethernet;

— отключение кондиционеров при пожаре (сигнал типа «сухой контакт» с пожарного пульта в серверное помещение);

— контроль утечки жидкости (датчик располагается под каждым кондиционером);

— удалённый, независимый от кондиционеров, контроль температуры внутри серверной (место индикации за пределами серверной комнаты, указывается Заказчиком).

Система кондиционирования должна обеспечивать отвод от 168 кВт тепловой энергии и предусматривать возможность последующего наращивания мощности до 269 кВт путем добавления дополнительных модулей, согласно этапов роста тепловыделения ЦОД приведенного в таблице 3.

Оборудование должно обеспечивать каскадный режим работы и режим ротации.

Система кондиционирования при аварийном переключении на электроснабжение от ДГУ должна обеспечивать автономную работу не менее 20 минут с сохранением всех климатических характеристик ЦОД. Внешние модули системы кондиционирования размещаются вне помещения ЦОД на выделенной площадке (1 этаж) возле здания или на крыше здания.

При размещении основного активного коммутационного оборудования в отдельном помещении, требования к системе кондиционирования такого помещения идентичны требованиям к системе кондиционирования машинного зала (см. выше).

3.5.1.1 Необходимые требования к размещению системы кондиционирования

Выделение необходимого места в экранированном помещении для установки внутренних блоков, с возможность оперативного доступа обслуживающего персонала. Данное размещение должно позволять проведение монтажных и демонтажных работ с внутренними блоками кондиционеров.

Подвод электропитания к блокам, которые устанавливаются в помещении выполнить медным кабелем с необходимым сечением жил, предусмотреть запас сечения 10%.

При использовании увлажнителя, обеспечить подачу воды. Подающий трубопровод необходимо оснастить регулятором давления для обеспечения допустимого диапазона давления воды в используемой магистрали. На этом трубопроводе необходимо предусмотреть запорный вентиль для отключения увлажнителя на время технического обслуживания, фильтры грубой и тонкой очистки. Внутренний диаметр сливного трубопровода не менее 40 мм. Уклон сливного трубопровода должен быть не менее 2%. В случае невозможности обеспечить уклон – использовать конденсатный насос.

Между внутренними и наружными блоками проложить магистральные трубопроводы (при использовании «жидкости» как охлаждающее вещество, каждый трубопровод оснастить датчиками давления и автоматической запорной арматурой на входе в экранированное помещении и возле внутреннего блока). Выполнить теплоизоляцию трубопроводов.

Обеспечить приток свежего воздуха в помещение серверной согласно СНиП.

Предусмотреть систему газоудаления, включаемую вручную за пределами серверной комнаты.

На случай аварийного перехода системы электропитания на работу от ДГУ, предусмотреть аварийный режим работы системы кондиционирования ЦОД до выхода ДГУ на 100 % режим работы.

При выборе системы использовать ресурсоэкономные технологии.

3.6 Требования к структурированной кабельной системе ЦОД

Кабельная система должна быть выполненная в соответствии с международными стандартами – ISO/IEC 11801 Ed.2000 (общий стандарт кабельных телекоммуникаций офисных зданий), TIA/EIA-568-B (стандарт кабельных телекоммуникаций офисных зданий), ISO/IEC 18010 (стандарт прокладки телекоммуникационных каналов в офисных зданиях), EIA/TIA-569 (стандарт прокладки телекоммуникационных каналов в офисных зданиях) и обеспечивать уровень резервирования 2N.

Система телекоммуникационного заземления СКС должна отвечать требованиям стандартов: ІЕС , ІЕС , ПУЭ-86 и требованиям поставщиков активного оборудования.

В экранированном помещении ЦОД организовываются две независимые кабельные системы:

— медная структурированная кабельная система класса E/категории 6

— волоконно-оптическая кабельная система с использованием многомодового кабеля (Multi Mode Fiber) 50/125 мкм, кабель типа ОМ2 ISO11801 Ed.2 09-2002 (для передачи данных).

Каждый шкаф с вычислительным оборудованием оснащается:

— 2-мя 24 портовыми патч-панелями (или одной 48 портовой) с экранированной розеткой RJ45/s;

— 2-мя 24 портовыми дуплексными (48 дуплексных портов) волоконно-оптическими патч-панелями с модулями LC;

— 2-мя кабельными организаторами.

Все коммуникации СКС ЦОД от серверных шкафов необходимо свести в одну «точку» (2-4 стойки HiD), которые будут центром коммутации.

В центрах коммутации предусмотреть использование патч-панелей повышенной плотности.

СКС должна удовлетворять будущие потребности заказчика без существенных переработок и расширений.

Построение СКС должно проводиться с учетом рекомендаций ведущих мировых компаний – производителей компонентов и инсталляторов СКС, а также не противоречить строительным нормам и правилам и требованиям техники безопасности, которые действуют на территории Украины.

Проектирование и монтаж СКС должно осуществляться с привлечением компаний, которые имеют статус сертифицированного инсталлятора СКС, государственную лицензию на выполнение этих работ и опыт построения современных СКС.

Все компоненты СКС должны быть изготовлены компанией, которая имеет международные сертификаты качества (ISO 9001, ISO 9002 или другие).

Элементная база «медной» составляющей СКС (кроссовое оборудование, инсталляционный кабель, информационные розетки, кроссировочные шнуры) должны быть рассчитаны на передачу информационного сигнала с частотой 250 Мгц и выше.

Элементная база «волоконно-оптической» составляющей СКС (кроссовое оборудование, инсталляционный кабель, информационные розетки, кроссировочные шнуры) должны быть рассчитаны на передачу информационного сигнала с частотой 1Гц.

Для организации медной СКС использовать кабель экранированная „витая пара” типа FTP
категории 6.

Для организации волоконно-оптической составляющей СКС использовать многомодовый кабель.

Оболочки кабелей в соответствии со стандартом ISO/IEC 11801 Ed.2000 должна быть выполнена из негорючих фторополимерных материалов с международной маркировкой LSZH (Low Smoke Zero Halogen). Кабель должен иметь все соответствующие сертификаты к действующим нормам и правилам Украины.

Волоконно-оптические линий связи оконечиваются на кроссовых панелях с кабельными дуплексными разъемами типа LC.

При проектировании серверного помещения предусмотреть установку центральных коммутационных шкафов на максимальном удалении один от другого и в противоположных местах экранированного серверного помещения.

СКС должна быть обеспечена гарантией от производителя системы сроком не меньше 25 лет.

3.6.1.1 Требования к структуре кабельной системы

Архитектура кабельной сети – „звезда” с минимальной кабельной трассой от вычислительного оборудования к активному сетевому оборудованию.

В шкафах центров коммутации предусмотреть установку коммутационного оборудования Cisco Systems Catalyst 6

3.6.1.2 Требования к технической защите информации

Учитывая требования ВСН В.2.1-2001: „Здания и сооружения. Проектирование банков и банковских хранилищ”, а также государственных стандартов Украины ГСТУ 3396.0-96 „Защита информации. Техническая защита информации. Основные положения” и ДСТУ 3396.1-96 „Защита информации. Техническая защита информации. Порядок проведения работ”, оборудование и схема организации СКС должны отвечать известным на сегодняшний день стандартам электромагнитной совместимости (ЭМС):

— 89.336.ЕС – общие требования к системам передачи данных в странах ЭС;

— EN55022 – нормы и методы определения электромагнитного излучения и помехоустойчивости оборудования сетей передачи данных;

— EN55081-1 – общие нормы электромагнитного излучения;

— EN55082-1 – общие нормы помехоустойчивости;

— PrEN55024-4 – конечные значения е. р.с., что наводится в кабелях передачи данных.

3.6.1.3 Требования к центру коммутации ЦОД

Коммутационные шкафы должны быть заземлены на контур технологического телекоммуникационного заземления (КТТЗ) согласно с требованиями международного стандарта TIA/EIA 807 „Требования к контурам заземления и разграничения в зданиях общественного назначения” с учетом следующих требований:

— экраны всех кабелей в пределах коммутационного шкафа должны быть объединены и соединены с КТТЗ;

— не разрешается последовательное подключение коммутационных шкафов к КТТЗ;

— шину заземления необходимо подвести к КТТЗ.

3.6.1.4 Требования к прокладке кабельных трасс

Суммарная длина кабеля от порта активного оборудования к любому информационному порту в шкафу по подсистемам СКС не должна превышать:

— для «медных» кабелей 90м;

— для «волоконно-оптических» 300м.

При прокладке кабеля в горизонтальных и вертикальных магистральных каналах необходимо предусмотреть 30% резервного свободного места.

Разведение кабельных трасс выполняется в лотках размером 300х54х3000 (ШхВхД), отводы от магистрали выполняются лотками размером 150х30х3000 (ШхВхД). Спуски кабеля к шкафам выполнить по лоткам.

3.6.1.5 Требования к гарантийному обслуживанию СКС

Компания, выполняющая работы по созданию СКС, должна применять следующий перечень мероприятий по гарантийному обслуживанию оборудования системы в целом:

— гарантий срок обслуживания СКС не менее 25 лет;

— проведение консультаций специалистов Заказчика, на основании сообщения о проблемах, которые возникают в ходе эксплуатации СКС;

— устранение выявленных неисправностей проводится исполнителем в срок до 2-х рабочих дней.

— способ устранения неисправности – непосредственная работа специалистов Исполнителя на объекте Заказчика вместе с специалистами Заказчика.

3.7 Требования к телефонно-кабельной канализации

Для бесперебойной работы Объекта необходимо организовать подвод от существующей телефонно-кабельной канализации к зданию не менее 2-х независимых кабельных вводов (каждый площадью не менее 400 см2), схема резервирования 2N. Вывод коммуникаций необходимо осуществить к помещению ЦОД, расстояние между кабельными вводами не менее 10 метров.

Доступ и предоставление в пользование канализации кабельных вводов ЦОД Банку и акредитованным Банком провайдерам предполагает отсутствие каких-либо ограничений со стороны компании-претендента (в том числе отсутствие разовых или абонентских оплат за пользование, аренду или доступ в канализации кабельных вводов ЦОД).

3.8 Требования к хранению резервных копий

На территории ЦОД предусмотреть отдельное помещение электронного архива для хранения носителей с резервными копия информации согласно требованиям «Положення про порядок формування, зберігання та знищення електронних архівів у Національному банку України і банках України», утвержденного решением НБУ .

3.9 Требования к внешним каналам связи

Для обеспечения надлежащей связи с другими серверным помещение Банка необходимо проложить 2-а волоконно-оптические одномодовые кабеля (монотуб, стальная ленточная броня, не меньше чем 32-х жильные) от помещения ЦОД к действующим серверным помещениям заказчика (г. Киев, бул. Шевченко 8/26). Данные кабели необходимо проложить от помещения ЦОД к помещению Банка разными трасами, которые не должны пересекаться, данные трасы должны иметь минимальную длину. В пределах г. Киева длина кабельной трассы желательно не должна превышать 19 км..

Смотрите так же:  Как оформить ипотеку с испорченной кредитной историей

При размещении ЦОД в другом месте при невозможности выполнить работы по прокладке собственных волоконно-оптических соединительных кабелей предусмотреть организацию 2-х транспортных каналов передачи данных с пропускной способностью 10 Гбит/сек на основе оптического соединения или с пременением технологии DWDM.. Данные каналы передачи данных должны быть организованные через разных операторов связи у которых не должно быть взаимного использования канало-образующего оборудования и кабельных трасс.

Претендент должен гарантировать соблюдение указанных выше требований.

Конечной точкой подачи каналов передачи данных считаются порты на телекоммуникационном оборудовании заказчика.

При подаче коммерческого предложения необходимо отдельно отобразить размер разовых и ежемесячных расходов на создание и сопровождение каналов передачи данных.

Доступ и предоставление в пользование канализации кабельных вводов ЦОД Банку и акредитованным Банком провайдерам предполагает отсутствие каких-либо ограничений со стороны компании-претендента (в том числе отсутствие разовых или абонентских оплат за пользование, аренду или доступ в канализации кабельных вводов ЦОД).

3.10 Требования к системе пожарной безопасности

Помещение серверной ЦОД подлежит защите установкой автоматического газового пожаротушения (УАГПТ) и пожарной сигнализации (УАПС). УАГПТ и УАПС должны быть построены на базе сертифицированного оборудования и соответствовать требованиям ДБН В 2.5-13-98 «Пожарная автоматика зданий и сооружений». В качестве огнетушащего вещества применить газ «Хладон-227» либо Novec 1230.

Автоматические установки пожаротушения и пожарной сигнализации должны обеспечивать:

 раннее обнаружение пожара по первичному признаку возникновения пожара, характерному для данного типа помещений;

 объемное тушение и локализацию пожара;

 автоматический или ручной запуск автоматики УАГПТ;

 вывод сигнала «Пожар» от установок пожаротушения и пожарной сигнализации на пульт централизованного наблюдения объекта и городской пульт пожарной охраны (при наличии технической возможности);

 выдачу сигнала «Пожар»;

 разделение сигналов «Пожар» и «Неисправность»;

 выдачу сигналов управления на закрытие клапанов приточной и вытяжной вентиляции, систем кондиционирования, отключения напряжения от технологического и электротехнического оборудования, силовых и контрольных кабелей от источников электроснабжения при пожаре на вводе в помещение;

 оповещение персонала находящегося в помещениях ЦОД о возникновении пожара с помощью светозвуковых оповещателей;

Приемно-контрольные приборы установок пожаротушения и пожарной сигнализации разместить в помещении с круглосуточным пребыванием дежурного персонала согласно п.1.6.16 ДБН В 2.5-13-98.

Помещение серверной должно быть оборудовано системой удаления газа после окончания работы установки пожаротушения.

3.11 Требования к системе мониторинга ЦОД

ЦОД должен быть оснащен централизованной системой мониторинга основных параметров инженерной инфраструктуры ЦОД и контроля параметров окружающей среды в помещениях ЦОД, включая дублирование серверов сбора и хранения данных, кабельную подсистему для системы мониторинга.

4 Требования к проектированию

Стадии проектирования

Проектирование ЦОД выполняется в три стадии:

1) Эскизный проект (стадия ЭП). Стадия, утверждаемая ПАО «ВТБ Банк» (далее – Заказчик).

2) Проект (стадия П). Стадия, утверждаемая Заказчиком.

3) Рабочая документация (стадия Р). Не утверждаемая стадия.

При проектировании должны быть учтены следующие требования, предъявляемые к инженерной инфраструктуре ЦОД:

— обеспечение полной физической безопасности оборудования с размещенной на нем информацией (защита от пожара, воды и противопожарной жидкости, электромагнитного излучения, несанкционированного доступа, вандализма, пыли, дыма, падающих обломков);

— круглосуточное круглогодичное обеспечение работоспособности оборудования;

— проведение сервисных работ без отключения оборудования;

— соблюдение требуемых для функционирования оборудования климатических условий;

— разделение зон ответственности в зависимости от задач доступа персонала к различным устройствам;

— масштабируемость/переносимость решения в целях наращивания инфраструктуры ЦОД в соответствии с бизнес-процессом Банка;

Проектирование необходимо провести с учетом оценки всех потенциально возможных рисков, связанных с привязкой инженерной инфраструктуры ЦОД к объекту (как к существующему, в случае его модернизации, так и вновь проектируемому – если объект является новым) с возможным изменением типов поставляемого оборудования, его характеристик и т. п., которые могут повлиять на эффективность и надежность функционирования всего комплекса.

В проектном предложении необходимо предусмотреть проведение аудита объекта, который будет выбран Банком для размещения ЦОД, с целью оценки реального состояния его инженерной инфраструктуры и прогнозирования возможных рисков при построении.

Обследование объекта должно включать следующие работы:

1. Предварительный этап:

— подготовка опросных материалов для получения первичных данных об объекте

— анализ исходных требований Банка;

— получение от Банка данных о функционировании инженерной инфраструктуры: ее составе, имеющихся ресурсах, количестве и качестве функционирования;

— изучение действующих нормативно-распорядительных документов, применительно к объекту.

2. Работа на объекте:

— изучение архитектурно-строительной структуры объекта;

— изучение имеющейся эксплуатационной документации;

— интервьюирование персонала Банка, ответственного за работу подсистем инженерной структуры;

— изучение энергоснабжения объекта;

— изучение трассировок и коммуникаций;

— изучение инженерной инфраструктуры действующего объекта (в составе подсистем);

— анализ эффективности эксплуатации аппаратного и базового программного обеспечения;

— анализ эффективности эксплуатации инженерных систем;

— документирование полученной информации.

3. Оформление документации по результатам работы:

— оформление результатов обследования существующих систем;

— оценка соответствия систем действующим нормативным документам;

— оценка соответствия организационно-штатной структуры требованиям по обслуживанию систем;

— оценка профессиональных уровней обслуживающего системы персонала;

— оценка соответствия систем безопасности требованиям к их эксплуатации и восстановления работоспособности;

— оценка удобства использования системы техническим персоналом и руководством;

— подготовка отчета об обследовании;

— согласование отчетных документов с заказчиком.

В рамках проведения аудита необходимо разработать и согласовать общую стратегию развития ЦОД Банка. Должны быть предусмотрены различные сценарии построения ЦОД с учетом возможных рисков.

Проектная и исполнительная документация должны выполняться в соответствии с действующими в Украине нормативами, стандартами и ведомственными документами Госкомсвязи.

5 Требования к составу и содержанию работ

При проектировании объекта должны быть выполнены проектные работы, учитывающие выполнение следующих видов работ:

— внутренняя коммутация систем;

— коммутация аккумуляторных батарей в батарейных шкафах;

— включение системы в эксплуатацию;

— полный перечень пуско-наладочных работ с испытаниями;

— полный перечень эксплуатационной документации.

При выполнении монтажных работ необходимо придерживаться всех требований техники безопасности соответственно ГОСТ 12.3.002, ГОСТ 12, СНИП ІІІ — 4-80, раздел 4 “Техника безопасности в строительстве”, ПУЭ.

6 Требования к организации безопасности.

Требования к оснащению помещения ЦОД техническими системами безопасности

Все помещения ЦОД должны быть оборудованные комплексом технических систем безопасности, который предназначен обеспечить сохранение материальных и информационных ресурсов Банка, защиту жизни и здоровья персонала и клиентов Банка.

В состав комплекса входят:

— система охранной сигнализации (СОС);

— система тревожной сигнализации (СТС);

— система видеонаблюдения и контроля (СВК);

— система контроля доступа (СКД);

Аварийное питание аппаратуры охранной и тревожной сигнализации должны обеспечивать их работу на протяжении не менее чем двенадцати часов в дежурном режиме в случае отключения основных источников электроснабжения.

Оснащение помещений ЦОД системой охранной и тревожной сигнализации

Система охранной сигнализации должна обеспечивать:

— защиту периметра здания (при необходимости защиту зон, которые прилегают к зданию, зон парковки автотранспорта и других);

— круглосуточный контроль обстановки на объекте, который охраняется, работоспособность оборудования;

— ведение протокола и действий пользователей системой;

— независимую дистанционную постановку-снятие с охраны помещений с выдачей сигнала «Тревога» в случае несанкционированного проникновения в помещения.

Средствами охранной сигнализации оборудуются: объемы внутренних помещений, внешние, переходные двери и оконные проёмы ЦОД, вентиляционные каналы, водосточные трубы, люки, шлюзы и другие коммуникационные прорезы размером более 150х150 мм, которые проложены в помещениях, которые охраняются.

Окна и двери оборудуются магнитно-контактными извещателями (на внешних дверях и окнах устанавливаются по два магнитно-контактных извещателя) и акустическими извещателями (на разбитие стекла).

Объемы помещений блокируются извещателями движения (инфракрасные пассивные — ИК).

Отделенные помещения для размещения ІТ-оборудования должны оборудоваться не менее чем двумя рубежами охранной сигнализации, для чего используются извещатели с разными физическими принципами действий.

Первым рубежом охранной сигнализации блокируются непосредственно входные двери на открывание двумя магнитно-контактными извещателями, которые подключаются на отдельный шлейф приемно-контрольного устройства (ППК) без права отключения.

Вторым рубежом охранной сигнализации блокируются объемы отделенных помещений для размещения IT-оборудования. С этой целью применяются извещатели дуального типа с разным физическим принципом действия, микропроцессорной обработкой информации с высоким уровнем защищенности, в том числе обязательно такие, что работают по двойной технологии (комбинированные микроволновые и инфракрасные). В качестве дополнительных рубежей охранной сигнализации могут использоваться извещатели, которые реагируют на его разрушение извне (извещатели на вибрацию или сейсмические), а также на его затопление.

Если для хранения ценностей используется сейф, то:

— двери сейфа блокируются двумя магнитно-контактными извещателями, которые подключаются на отдельный шлейф ППК без права отключения;

— сейф блокируется с помощью извещателей, которые реагируют на его разрушение извне (на извещатели вибрацию или сейсмические), а также тепловым извещателем.

Рубежи охранной сигнализации отделенных помещений для размещения ІТ-оборудования и сейфов должны здаваться под охрану (сниматься с охраны) с помощью кодовых устройств управления ППК.

Системы передачи оповещений, ППК должны быть размещены в помещениях охраны или в других помещениях ЦОД.

ППК, распределительные и соединительные коробки шлейфов сигнализации должны быть опломбированными (опечатанными) работниками, которые их обслуживают, или оборудованными антисаботажными устройствами (заблокированы на открытие) с круглосуточным подключением к ППК. Система тревожной сигнализации должна обеспечивать выдачу сигнала «Тревога» при возникновении угрозы персонала или угрозы повреждения оборудования путем нажатия кнопки тревожной сигнализации с идентификацией места сигнала „Тревога».

Для дистанционной подачи сигнала „Тревога» обязательно обеспечиваются радио-канальными извещателями тревожной сигнализации: руководители ЦОД, их ответственные лица и сотрудники охраны.

Кнопки тревожной сигнализации (КТС) устанавливаются в отделенных помещениях для размещения ІТ-оборудования, на рабочих местах ответственных лиц, кабинете руководителя, возле входных дверей, а также на посту охраны. При этом кнопки тревожной сигнализации должны устанавливаться в местах удобных для их использования персоналом ЦОД и незаметных для посторонних лиц.

Рубежи охранной сигнализации, средства охранной сигнализации и ручные извещатели системы тревожной сигнализации для обеспечения реагирования на их сигналы подключаются на пост физической охраны и субъекту (субъектов) охраны, с которым (которыми) заключен договор об охране ЦОД.

Оснащение помещений ЦОД системой видеонаблюдения
Система видеонаблюдения и контроля (СВК) должна обеспечивать осуществление визуального наблюдения внутренних помещений и территории, получение объективной информации о событиях в реальном времени, ведение видеоархива (с периодом хранения не менее 90 дней) и возможность идентификации субъектов, которые выполняли различные действия.

Системой видеонаблюдения оборудуются следующие зоны:

— центральный и запасной входы;

— подходы к месту сохранения ценностей;

— подходы к внутренним помещениям для размещения ІТ-оборудования;

— периметр здания отделения (подходы к зданию);

— другие помещения (определяется на стадии проектирования).

Требования к системе видеонаблюдения и контроля:

— удаленное администрирование системы, управление оборудованием и мониторинг;

— совместимость с программами основных разработчиков видеосистем и периферийного оборудования;

— возможность дальнейшего расширения функциональности системы видеонаблюдения и интеграции новых функциональных модулей с существующими;

— модульное построение системы, подключение новых модулей не должно влиять на работу уже существующих;

— скорость записи данных видеонаблюдения должна составлять не менее, 20 кадров в секунду;

— разрешающая способность установленных видеокамер должна позволять идентифицировать объекты видеозаписей;

— обеспечение защиты видеосерверов (видеорегистраторов) путем установки их в закрытом (недоступном для посторонних лиц) помещении; в случае отсутствия такой возможности — устанавливать видеосервера (видеорегистраторы) или на посту охраны, или в кабинете руководителей (при этом желательно видеосервер (видеорегистратор) с источником бесперебойного питания устанавливать в специальном металлическом шкафу, который оборудован вентиляционным блоком и закреплен к строительным конструкциям).

Оснащение помещений ЦОД системой контроля доступа

Система контроля доступа (СКД) предназначена для технического обеспечения пропускного (если он есть) и внутриобъектового режимов в помещениях ЦОД, разграничение прав доступа, регистрации и архивации всех событий в системе.

Система контроля доступа должна включать:

— средства контроля пребывания сотрудников и посетителей на территории ЦОД;

— средства накопления и дальнейшего анализа событий;

— обеспечивать возможность оперативного получения информации на центральном посту наблюдения о всех событиях, связанных с работой СКД в любом помещении ЦОД.

— Система контроля доступа должна обеспечить:

— санкционированный доступ сотрудников и посетителей во внутренние помещения ЦОДУ с разделением времени и зон доступа;

— контроль доступа работников и посетителей по таким признакам: срок действия, время и контрольные точки доступа;

— вывод на монитор дежурного охраны и пульт централизованного наблюдения сообщения о всех событиях в СКД;

— формирование отчетов по событиям, которые состоялись, с возможной задачей выборки по следующим признакам: тип события, номер пропуска, фамилия владельца пропуска, временный интервал построения выборки с точностью до одной минуты;

— формирование отчетов по оперативной ситуации на объекте: пребывание сотрудников и посетителей с учетом контролируемых зон доступа;

— защита самой СКД и информации в ней от несанкционированного доступа;

— хранение информации о событиях в СКД сроком не меньше одного года;

— ограничение времени срабатывания системы интервалом не больше 1 сек. после считывания пропуска устройством для считывания;

— автоматическую диагностику состояния аппаратного обеспечения системы;

— возможность дальнейшего расширения функциональности СКД и интеграции новых функциональных модулей с существующими.

Организация рабочего места сотрудника охраны

— В ЦОД организовывается круглосуточный пост охраны.

— Рабочее место сотрудника охраны организуется в месте, которое бы позволяло ему визуально контролировать вход в помещение, которое охраняется, и само помещение. В то же время, расположение рабочего места охраны должно исключать возможность посторонним лицам незаметно приблизиться к сотруднику охраны.

— В случае размещения на рабочем месте сотрудника охраны приёмно-контрольного прибора оборудования и технических средств охраны, оно должно быть расположено в месте, недоступном для наблюдения посторонними лицами.

— Рабочее место сотрудника охраны должно быть оборудовано:средствами связи, стационарной кнопкой тревожной сигнализации. Стационарная кнопка тревожной сигнализации устанавливается в месте удобном для ее использования сотрудником охраны и незаметном для посетителей.

— Для дистанционной подачи сигнала “тревога” сотрудники охраны обязательно обеспечиваются радиоканальными извещателями тревожной сигнализации.

— Помещение охраны должно иметь площадь не менее чем 5 кв. м., оборудованное кондиционером, соответствующей мебелью, средствами связи и иметь стандартное наполнение розеточной группой.