Автор Тема: Тормоза на 5405  (Прочитано 1093 раз)

0 Пользователей и 1 Гость просматривают эту тему.

Оффлайн Flyer_SPb

  • Модератор
  • Старожил
  • *****
  • Сообщений: 990
  • Рейтинг: 26
  • Пол: Мужской
  • Ветеран войны с Kilrathi
    • Просмотр профиля
  • Откуда: 2:5030
Тормоза на 5405
« : 18 Января 2013, 17:43:09 »
Платформа Intel SR2612UR, 2 x E5630, 24GB RAM
Адаптек 5405 (18252) + BBU
CentOS 6.3
Собран R50 6 x ST3600057SS Cheetah 15K.7, но речь не о нём (и нагружен он не был)

Добавлены 6 x ST33000650SS Constellation ES.2 7200, сконфигурены временно как volume
Запустил вечером проливку нулями параллельно всех volume
dd if=/dev/zero of=/dev/sd$n bs=1M &>>sd$n_3.log &
Смотрю
iostat -dmx 2
Пошли литься по ~150MB/s
Через (немного меньше часа) скорость упала до ~20MB/s
Оставил на ночь
Утром наблюдаю ту же картину, ~10-20MB/s, и за ночь пролилось по 1.2TB
Ещё через (час) посмотрел - 5 дисков по ~130MB/s, последний - ~10MB/s
Ещё через несколько минут - и последний поднялся до ~130MB/s

У дисков в SMART примерно такое:
Background scan results log
 Status: pre-scan is active
 Accumulated power on time, hours:minutes 17:36 [1056 minutes]
 Number of background scans performed: 0, scan progress: 14.78%
 Number of background medium scans performed: 0
% за ночь не изменился, т.е., это не скан, на что я, было, подумал.

В логах системы ничего подозрительного.
В логе контроллера все записи имеют дату 1358323131, несколько последних относятся только к температуре батареи.

Что это может быть, и как этого избежать по ходу работы? (Или хотя бы прогнозировать/планировать)
They stole my gun, my beautiful Steltek gun!

Оффлайн VanDyke

  • Модераторы
  • Ветеран
  • *****
  • Сообщений: 1800
  • Рейтинг: 73
  • Пол: Мужской
  • Network Warrior
    • Просмотр профиля
  • Откуда: Destination network unreachable
Тормоза на 5405
« Ответ #1 : 18 Января 2013, 18:57:55 »
Мож есть смысл проверить еще раз с oflag=direct?
Not as ultimate as 42, but pretty close...

Оффлайн Flyer_SPb

  • Модератор
  • Старожил
  • *****
  • Сообщений: 990
  • Рейтинг: 26
  • Пол: Мужской
  • Ветеран войны с Kilrathi
    • Просмотр профиля
  • Откуда: 2:5030
Тормоза на 5405
« Ответ #2 : 18 Января 2013, 19:37:54 »
После этого прогнал чтение со всех параллельно - нормально.
Прогнал на дисках длинный селфтест.
Попробовал ещё раз запись - больше, чем до половины пробежало без всяких тормозов, дальше ждать не стал.
С дисками никаких проблем, в SMART'е/логах чисто.
Сейчас там собран R10 (да и R50 пришлось пересобрать, но это другая история) и туда уже мигрируют виртуалки.

Подозреваю, это какая-то внутренняя жизнь контроллера.
They stole my gun, my beautiful Steltek gun!