940 likes | 1.39k Views
Комплексный подход по мониторингу и контролю центров обработки данных. Раиль Хайбуллин Инженер АР C. Agenda. Введение Элементы контроля Выводы Практика?. Что необходимо оценить ?. Возможность постоянного контроля состояния стоек ЦОД Какова температура в стойке ?
E N D
Комплексный подход по мониторингу и контролю центров обработки данных Раиль Хайбуллин Инженер АРC
Agenda • Введение • Элементы контроля • Выводы • Практика?
Что необходимо оценить? • Возможность постоянного контроля состояния стоек ЦОД • Какова температура в стойке? • Работает ли вентилятор у сервера? • Возможность постоянного контроля состояния систем ЦОД • Есть ли области перегрева? • Кто вмешивался в работу конкретных стоек? • Видео и Аудио наблюдение • Разграничение прав доступа к объектам ЦОД • Возможность постоянного контроля малообслуживаемых удаленных точек • Работает ли кондиционирование? • Есть ли утечки вблизи оборудования? • Кто сейчас находится на объекте и что он/она делает? APC White Paper #102
Как ? “Leak rope” around CRACs and CDUs CDU ( under raised floor if present ) Cooling Distribution Unit Supplemental smoke detector in each rack COLD COLD AISLE AISLE Digital video cameras Rack Fronts strategically placed to monitor critical areas Rack Rack Rack Rack Rack Rack C C PDU UPS Batt . PDU UPS PDU A A R R C C 1 Humidity 3 Temp 3 Temp 3 Temp 3 Temp 3 Temp 3 Temp Rack Backs Door - open Humidity sensor HOT HOT sensor Door middle of each row AISLE AISLE Rack Backs Rack Rack Rack Rack Rack Rack C C PDU UPS Batt . PDU UPS A A R R 1 Humidity C C 3 Temp 3 Temp 3 Temp 3 Temp 3 Temp 3 Temp Rack Fronts COLD COLD AISLE AISLE Door - open sensor for each rack Window Three temperature sensors per rack Glass - break sensor at top / middle / bottom of rack front APC White Paper #102
Итак..... • Системы питания ЦОД • Источник Бесперебойного Питания (ИБП) • Состояние батарейный массивов (BMS) • Система распределения питания (ГРЩ/БРП) • Контроль ATS-переключателей (АВР) • Проблемы окружающей среды и безопасность • Контроль работы систем кондиционирования • Контроль параметров окружающей среды • Контроль доступа к управлению оборудованием • Системы контроля NetBotz • Cбор и хранение данных о состоянии ЦОД • ISX Central
ИБП • Удаленный контроль/управление/диагностика системы • Контроль работы/состояния ИБП и его компонентов • Контроль питания по входу/выходу • Удаленная диагностика ИБП • Автоматическое оповещение пользователя • Получение данных по событиям на ИБП • Статистика/отчетность • работы/состояния ИБПи его компонентов • питания по входу/выходу • Автоматическая остановка/запуск системы • Корректное закрытие приложений на серверах • Отключение ИБП • Включение ИБП при необходимости
ИБП: карты управления Основные методы управления • Карты сетевого управления ИБП • Карта релейного управления ИБП • Карты для модемного доступа к ИБП • Карта для в BMS-сетей • Вспомогательные компоненты SymmetraLX / PX / MW Smart-UPS 750VA-10000VA Silcon/ Smart VT /AIS3000
ИБП: карты управления Network SNMP Web/HTTP Telnet/SSH Серверная нагрузка ISX Central ISX Manager
ИБП: карты управления AP9617 Свойства: • Доступ через HTTP/HTTPS/SNMP(v.1/2/3)/Telnet/SSH • Лог событий и состояний ИБП (параметры ИБП и карты) • Сброс логов на внешние Syslog/FTP сервера (fm. 3.x) • Оповещение – SNMP, E-mail • Обновление / изменение прошивки (FTP) • управление через ТфОП (АР9618) • Локальная/RADIUS база клиентов • Апгрейд карт АР9617 вAP9618, АР9617 вAP9619 • Контроль температуры (только AP9618/AP9619) • Выход на сухие контакты • Совместимость с ISX Manager • Работа с PowerChute Network Shutdown • Перегрузка карты без перегрузки ИБП! Опции: • Апгрейд карты AP9617 – AP9618U, AP9619U • Датчик температура/влажность – AP9512THBLK • Датчик дверей – AP9513 AP9618 AP9619 Поддержка ИБП: • Smart UPS (>750ВА) • Smart UPS XL, RT, VT • AIS 3000/5000; Silcon • Symmetra RM, LX, PX, MW
ИБП: карты управления Сухие контакты (AP9618/AP9619) Кнопка сброса настроек карты (не ИБП!) Порт Ethernet Порт для ТфОП-линии (AP9618) Порт для T или T/H датчика (AP9618/AP9619) Слот для модулей расширения Батерейка Flash память для хранения логов
ИБП: карты управления Telnet / RS232 (через кабель 940-0024) – изменение настроек карты
ИБП: карты управления FTP (как обновление прошивки + чтение логов) AOS (APC Operation System) Прошивка ИБП: • ..sumx.. –для Smart /VT/AIS • ..sy.. – для Symmetra RM/LX • ..sy3p.. – для Symmetra PX • ..dp3e.. – для Silcon /MW Настройки карты Логи устройства Логи событий
ИБП: карты управления Перегрузка Заменить батарею Вкл ИБП Выкл ИБП Тест Калибровка Карта релейного управления Медные пары AP9610 Админ / Сторож
ИБП: карты управления Карты управления через модемный доступ Функции: • Управление ИБП через внешний модем (AP9608) • Управление ИБП через внутренний модем 33,6kbps (AP9618) Возможности: • Ведение журнала событий ИБП • Создание резервного канала управления • Парольная защита • Может использоваться как резерв карты сетевого управления Поддержка: • AP9608 – Smart , Symmetra, Matrix (старые модели) • AP9618 – все последние ИБП AP9608 AP9618
ИБП: карты управления Карты мониторинга через BMS (ModBus) шину Интерфейс RS-485 AP9622 Только одна карта на ИБП !
ИБП: карты управления AP9607 Подключение до 3 серверов к одному ИБП через ком. порт Подключение до 8 серверов к одному ИБП через ком. порт Управление ИБП через модем AP9207 Подключение до 3 дополнительных карт Smart Slot AP9604BLK
ИБП: ПО для управления Основные методы управления • APC PowerChuteBusiness Edition • APC PowerChute Network Shutdown
ИБП: ПО для управления Агент Сеть Консоль Серверная Часть Сеть Сеть Агент Предоставление информации пользователю Конфигурация работы ИБП Управление работой ИБП Сеть Агент Сеть Сбор информации Агент Сеть Связь с ИБП Реакция на события Регистрация событий Агент RS 232
ИБП: ПО для управления Power Chute Network Shutdown Software Power Сеть LAN UPS Network Adaptor PowerChute Network Shutdown Предоставление информации пользователю Конфигурация работы ИБП Управление работой ИБП Связь с ИБП через IP Контроль состояние ИБП Реакция на события Регистрация событий
ИБП: ПО для управления Список поддерживаемых серверных ОС: Version 2.2.1 • Windows 2000 Server, Professional, Advanced Server • Windows XP Professional • Windows 2003 Standard, Enterprise, Enterprise 64bit, Web Edition • Windows Vista • Novell Netware 6.0, 6.5 • Sun Solaris 8, 9, 10 on SPARC • Red Hat Linux Professional 8.0, 9.0 • Red Hat Enterprise Linux AS 2.1, 3.0, 4.0; ES 2.1, 3.0, 4.0; WS 4.0; AS Itanium 3.0 • SuSE Professional 8.0, 8.1, 8.2, 9.0 and 8.0 for Itanium • SuSE Linux Enterprise Server 9.0 on x86, AMD64, EM64T • Turbolinux Server 10 for x86, AMD64, EM64T Version 2.0.1 • IBM AIX 4.3.2, 4.3.3, 5.1, 5.2, 5.3 • HP-UX 10.20, 11i, 11i v2, 11i v2 (Itanium 2) Version 2.0.0 • Apple Mac OS X 10.4.6 • Windows NT 4.0 с SP4 и выше
Контроль батарейных цепей AP9921X Battery Management System Функции: • Автоматическая коррекция тока зарядки и дистанционное управление стационарными батареями • 1 модуль AP9921X + до 7 модулей расширения AP9921XS Возможности: • Поддержка 2/4/8/12В свинцово-кислотных батарей • Поддержка никель-кадмиевых батарей (от 1.2 В до 2.4 В ) • Обеспечения до 2-х батарейных "плеч" • Максимально на плечо - 224 (свинц)/375(никкель) батарей • Максимально на 2 плеча - 224 (свинц) / 256(никкель) батарей Поддержка: • HTTP/HTTPS/Telnet/SSH/SNMP/FTP/SCP/RS-485/RS-232 • Ведение логов Опции • Кабели для подключения батарей к системе мониторинга • Датчики тока AP9924 AP9925 AP9926 AP9927 AP9920CS AP9920CS2000
Системы распределения питания Блоки распределения питания по стойкам rPDU (БРП) Центральный (главный) щит распределения питания PDU (ГРЩ)
Системы распределения питания (ГРЩ) Функции: • Полномасштабный мониторинг входных и выходных параметров • Создание единого коммуникационного канала • Оповещение персонала (через ISX Manager) Возможности: • Температура трансформатора • 4 платы контроля токов (21 канал) в автоматах для нагрузки • Состояние байпасных переключателей • Входной внешний автомат • Контроль фазового напряжения после трансформатора и на нагрузке • Контроль линейного напряжения до трансформатора и на нагрузке • Контроль тока по фазам и в нейтрали (цепь нагрузки и байпаса) • Контроль фазового напряжения до трансформатора • Ток в заземляющем проводнике • Контроль схемы экстренного отключения • Проверка схемы экстренного отключения • Индикация для работы с байпасными автоматами
Системы распределения питания (БРП) Блок распределения питания в стойке Свойства: • Доступ через HTTP/HTTPS/SNMP(v.1/2/3) /Telnet/SSH • Лог событий и состояний БРП • Настройка оповещения для верхнего и нижнего уровня нагрузки • Сброс логов на внешние Syslog/FTP • Оповещение – SNMP, E-mail • Обновление / изменение прошивки (FTP) • Локальная/RADIUS база клиентов • Совместимость с ISX Manager • Коммутируемые выходы (Switched PDU) • Группировка портов по защите(32A) • Поэтапный старт PDU (для Switched PDU) • Варианты – Zero U и Rack U Порты питания (10/16А) Контроль нагрузки (дисплей) Кнопка поворота показания экрана Порт Ethernet Консольный порт управления
Системы распределения питания (БРП) Metered PDU
Системы распределения питания (БРП) Switched PDU
Автомат ввода резерва (АВР) AP7722
Контроль параметров окружающей среды ARU / SC / RC /RP Свойства: • Контроль температуры • Контроль влажности • Контроль 2 пар “сухих контактов” • Ведение логов • Оповещение – SNMP, E-mail • Контроль - HTTP/HTTPS/Telnet/SSH/SNMP • Контроль работы устройства • Контроль группы устройств • Работа с ISX Manager • update прошивок • Вывод на BMS Опции: • Датчики температура/влажность • Датчик протечки • Мигалка
Контроль параметров окружающей среды Свойства: • Контроль температуры (в комплекте AP9512TBLK) • Контроль 2 пар “сухих контактов” • Ведение логов • Оповещение – SNMP, E-mail • Контроль - HTTP/HTTPS/Telnet/SSH/SNMP • Контроль работы ИБП (+логи, +доступ) • Совместимость с ISX Manager,update прошивок • Работа с PowerChute Network Shutdown Опции: • Датчик температура/влажность – AP9512THBLK • Датчик для дверей – AP9513 Network Management Card Если имеется ИБП: • Smart UPS (>750ВА) • Smart UPS XL, RT, VT • AIS 3000/5000 • Symmetra RM, LX, PX, MW • Silcon AP9618 AP9619
Контроль параметров окружающей среды • Каскадное подключение AP9340 + x*AP9341 (x до 32) • Длина “кластера” – до 1000 метров • Масштабируемое решение для контроля до 198датчиков температуры/влажность + 132 пар “сухих контактов” • Вертикальная установка в стойки NetShelter • Коммутируемы выход питания (10А) • Порт сигнального маячка (опция AP9324) • Котроль -SNMP/HTTPS/Telnet/SSH/RS-232 • Интеграция в системы BMS (Modbus) • Журнал событий, настройка доступа, RADIUS • Складирование логов на внешний FTP-сервер • Совместимость с ISX Manager,upgrade прошивок Состав: • AP9340 - датчик температуры/влажность AP9335TH + датчик температуры AP9335T • AP9341 - датчик температуры AP9335T Опции: • Датчик температура/влажность – AP9335T/TH • Мигалка AP9324 APC Environmental Manager AP9340 APC Temperature & Humidity Expansion Module AP9341 AP9335T AP9335TH AP9324
Контроль параметров окружающей среды Environmental Management System AP9320 Движение ДЫМ Маячок AP9322 AP9323 AP9324 AP9512TBLK AP9512THBLK AP9520T AP9520TH AP9325 AP9326 AP9513 Температура/влажность Открытие дверей Протечки
Контроль параметров окружающей среды СРАВНИВАЕМ…..
Контроль доступа к оборудованию СвойстваKVM-оборудования: • Использование CAT5 для передачи сигнала • WEB-доступ, меню управления OSD • Поддержка IE 5,6; Netscape 7; Mozilla/Firefox • Аутентификация доступа (Kerberos, RADIUS, LDAP, TACACS+) • Использованиепротокола RDP для систем Windows NT/2k/XP/2k3 • SNMP-оповещение • Ведение логов (поддержка Syslog) • Каскадное подключение с поддержкой VPN-соединений для контроля до 256 серверов • AUX-порт для внешнего модема Опции: • Монтаж с KMM (AP5015/AP5017) в 1U – AP5016 • Консоль удаленной работы до 152 метров –AP5410 • Шлюз для аналоговых KVM сетей – AP5456 • Кабель для rPDU – AP9317 AP5401 – CAT5 AP5405 - IP KVM AP5456 – IP Gateway AP5410 – KVM Console AP5015 AP5017 AP5017R AP5460 AP5461 AP5462
Контроль доступа к оборудованию Сервера консольного управления • Соединение по Ethernet 10/100 BaseT • Аутентификация/централизованное управление • Журнал событий • Поддержка SSH/SNMP/Telnet/FTP • Удаленная перегрузка устройств • Вертикальное (AP9290) и стоечное исполнение • Каскадное подключение (AP9301, AP9302, AP9303) • SNMP управление (AP9301, AP9302, AP9303) • Двойной ввод питания (AP9303) • Поддержка PCMCIA для дополнительных карт (AP9303) AP9301 Наборы кабелей для консольных серверов приобретаются отдельно, в зависимости от типа подключения (DB-9, DB-25, RJ-45) ! AP9302 AP9290 AP9303
Контроль доступа к оборудованию Датчики дверей AP9513 AR8132A (2 шт)
Контроль доступа к оборудованию Контроль доступа на уровне стойки. Свойства: • Контроль доступа к стойке через электронные замки (магнитный замок), датчики дверей • Карты доступа –HID • Установкавертикально/горизонтально только в стойки NetShelter SX • Доступ - Telnet/SSH/FTP/HTTP/HTTPS/RS-232 • Оповещение SNMP, E-mail • Интеграция с ISX Manager. • Upgrade прошивок Датчики в составе: • Датчики дверей (2 шт) • Сенсорные замки (2 шт) • 2 ключа HID 26-bit Опции: • Набор электронных ключейAP9370-10 (10 шт.) • Сигнальный маякAP9324 AP9361 AP9324 AP9370-10
Контроль доступа к оборудованию КАК ? Сенсорные замки Датчики дверей
APC NetBotz – безопасность и контроль • Захват видео(движение), звук, шум • Контрольтемпературы, влажности, точка росы, скорость воздуха • Датчики наличия воды,открытия дверей в стойке, пыли, токовые датчики • Подключение датчиков и камер сторонних фирм • Контроль состояния в стойке и серверном помещении • Удаленное управление и мониторинг • Графическое представление и анализ данных с датчиков • Доступ SNMP, FTP, HTTP, HTTPS, SSL, e-mail • Интеграция с ISX Manager (оповещение) • Единый сервер управления (поддержка 1025 устройств), хранениеи обработка данных) – ISX Central
Камеры CCTV-адаптеры Датчик пыли/воды APC NetBotz – безопасность и контроль GSM/GPRS сети GSM модем WI-FI сети IEEE 802.11 модем токовые датчики Модуль расширения Датчик воды Датчик температуры USB Hub Сенсор 0-5 вольт Датчик влажности Генератор Датчик тока 0-600 А Датчик замыкания Чиллер Поддержка устройств сторонних фирм (SNMP)*: Avocent PowerWare MGESun MicroJuniper Alcatel Bay Tech Liebert Dell Foundry Bay Tech IBMAvaya Raritan Extreme Cisco HP * При использовании PSM-модуля возможна поддержка до 48 SNMP-устройств
Спецификация NetBotz 320 • Варианты: настенный или в стойку • Сенсоры на устройстве: • Температура • Влажность • Скорость воздушного потока • Точка росы (по показаниям) • Камера • Сенсор шума • Спецификация камеры • 24 bit color • Focal Length: 4mm • 640x480, 320x240, 160x120 • Maximum 20 FPS • 1/4” C / CS mount lenses • 4 порта для внешних датчиков • Подключение 10/100 RJ-45 Ethernet • Питание 15 Вт • Тепловыделение – 50 BTU/h
Спецификация NetBotz 420 • Варианты: настенный или в стойку • Сенсоры на устройстве: • Температура • Влажность • Скорость воздушного потока • Точка росы (по показаниям) • Камера • Сенсор шума • Спецификация камеры • 24 bit color • 640x480, 320x240, 160x120 • Focal Length: 4mm • Maximum 20 FPS • 1/4” C / CS mount lenses • 4 порта для внешних датчиков • Порт USB 1.1 для внешних POD • Слот CF (для дополнительных карт) • Подключение 10/100 RJ-45 Ethernet • Питание – 20 Вт (69 BTU/h)
Спецификация NetBotz 500 • Настенный вариант • Сенсоры на устройстве: • Температура • Влажность • Скорость воздушного потока • Точка росы (по показаниям) • Камера • Сенсор шума (запись звука) • Спецификация камеры • 24 bit color • 1280x1024, 1024x768, 800x600, 640x480, 320x240, 160x120 • Maximum of 30 FPS • ½ “ C / CS mount lenses, focal Length: 8mm • 4 порта для внешних датчиков • 4 порта USB 2.0для внешних POD • Слот PCMCIA (для дополнительных карт) • Подключение 10/100 RJ-45 Ethernet • Питание 25 Вт (85 BTU/h)