Инструменты пользователя

Инструменты сайта


equipment:storage:start

Сервер хранения данных

На базе сервера SuperMicro. http://www.trinitygroup.ru/products/server/trinity/el/e130-m3

Технические характеристики

Процессор Один четырехъядерный Intel Xeon34XX
ОЗУ До 24ГБ DDR3 ECC (до шести 1ГБ, 2ГБ или 4ГБ DIMM). Свыше четырех модулей памяти поддерживается ТОЛЬКО память Registered
Чипсет Intel 3420
Жесткие диски До 16шт SATA или SAS HDD, или комбинация SAS-SATA
RAID контроллер Adaptec ASR5805 (512MB Cache, RAID0/1/1E/5/5EE/6/10)
Рекомендуется установка BBU ABM-800 (модуль резервного питания кэша контроллера
Опционально может устанавливаться RAID контроллер Adaptec 5445 (дополнительный внешний порт расширения), 5405Z (безбатарейная защита кэша) или 5445Z (дополнительный внешний порт расширения и безбатарейная защита кэша)
Сеть 2 x Gigabit Ethernet (RJ45) плюс выделенный порт IPMI
Слоты расширения PCI-Eх8 G2 - 3шт (один занят RAID контроллером)
PCI-Eх4 G2- 1шт
PCI-Eх1 - 1шт
PCI-32 - 1шт
Питание Дублированный 800Вт блок питания, 220В 50Гц
Габариты 19″ 3U, 437х648х132мм (ШхГхВ)
Удаленное управление IPMI с функцией KVM-Over-LAN, virtual media over LAN
Интегрированные устройства DVD-ROM, 2xUSB2.0, 6xSATA, Video, PS/2 KB/Mouse

Подробнее:

mb MB X8SIL-F , Intel 3420, 4xDDR3, 2x8PCIE, 1x4PCIE, 1xPCI32, 2x1Gb Eth, 6xS-ATA, fake RAID(0,1,5,10), Video, IPMI, m-ATX.
cpu Intel Xeon X3430 (2.4GHz, DDR3 1333MHz, cache 8MB, Quad, LGA1156, 95W)
mem 8GB/16GB, ECC, DDR3-1333
case CSE-836E1-R800B, Black, 19«, 16xSAS/SATA HS Bays, Slim DVD, 2x800W, 3U, E-ATX.
cd Slim CD/DVD SATA to IDE KIT (ADSATAPISA+AASATAPIBK / CDM-PSATA).
sas cable CBL-0108, Ipass - Ipass SAS Cable, 18».
nic AOC-STG-I2, 2-port 10-Gigabit Ethernet LAN card (Intel 82598EB), PCI-e x8, 2xCX4, LP.
raid Adaptec ASR-5805, 512MB, 8int SAS/SATA, PCI-E x8 + battery Adaptec ABM-800 Kit.

Backplane

BPN-SAS-836EL1 1 3U SAS / SATA Expander Backplane with single LSI SASX28 Expander Chip

bpn-sas-836el.pdf

Сеть

4x1GE сетевая карта Intel-I350T4V2BLK.

Дисковая подсистема

RAID-контроллер

Подключить диск с данными к серверу

  1. Найти свободный отсек – у свободных через вентиляционные отверстия видна белая заглушка.
  2. Вынуть салазки, открутить винты, снять заглушку.
  3. Установить диск, прикрутив как минимум четырьмя винтами – иначе может заклинить. Пакетик с винтами обычно лежит в левом верхнем отсеке.
  4. Вставить диск в сервер.
  5. Запустить программу управления массивом StorMan.
  6. Щелкнуть по диску правой кнопкой и нажать «create JBOD disk» (если вместо этого нажать «create simple volume», первые 42 блока с таблицей разделов будут затерты нулями).
  7. Перезагрузиться. Диск появляется в /dev только после перезагрузки. Никакие rescan-ы в /sys/class/scsi-host не помогают.
  8. Скопировать данные в хранилище.

После копирования:

  1. Отключить диск
     echo 1 | sudo tee /sys/block/(whatever)/device/delete
  2. Извлечь диск, поставить заглушку на место, прикрутитв винтами.
  3. Вернуть салазки в свободный отсек, соблюдая нумерацию.
  4. Положить пакетик с винтами на место.

Нумерация отсеков:

3 7 11 15
2 6 10 14
1 5 9 13
0 4 8 12

Проблемы

-0- Особенности контроллера Adaptec: при инициализации диска он «откусывает» кусок в конце диска для метаданных и подравнивает его размер до круглого значения. Поэтому не надейтесь, что диск, размеченный где-то еще, заработает в этом сервере.

Чтобы это обойти, оставьте пустое место в конце диска (кратно 5ГБ, либо 40 ГБ для дисков с 4K-секторами).

-1- Система раз в 5 минут перезагружается, если сконфигурировать watchdog в BIOS.

Решение: на этой материнке два разных watchdog: один в биос (фиксирован на 5 минут), другой в IPMI (BMC-контроллере). Устанавливаем сервис `watchdog`, который взводит таймер в IPMI при старте операционки. Watchdog в BIOS не используем.

-2- Чтобы выбрать загрузочный диск, нужно:

  • Нажать Ctrl-A при загрузке.
  • В Adaptec 5805 Configuration Utility выбираем Manage Arrays.
  • Выбираем нужный диск, нажимаем Ctrl-B.
equipment/storage/start.txt · Последние изменения: 2022/03/22 17:35 (внешнее изменение)