Автор Тема: Про СХД? Расскажите, как это делают взрослые дяди?  (Прочитано 9257 раз)

0 Пользователей и 1 Гость просматривают эту тему.

Оффлайн Triangle

  • Модераторы
  • Олдфаг
  • *****
  • Сообщений: 7128
  • Рейтинг: 48
  • Пол: Мужской
  • Откуда: замкадыш
Мдя, т.е. всё таки 60...

Какие нагрузки, да смишные.
Ну контролеры домены вы меня хоть стреляйте предпочту оставить физическими 2шт.
Файловый сервер. Сейчас 2Тб.
Чанга, сейчас 500Гб.
Сервер БД, 70 пользователей 1С 3 базы по 14Гб SQL
Сервер терминалов, те же самые пользователи.
Ну и бэкапы... Ну да на зеркало, как раз те самые 2 зеркала по 4Тб, 8 пока дорого и страшно.
Тетрис научил нас жизненно важному пониманию, успехи исчезают, ошибки накапливаются.

Оффлайн Retif

  • Администраторы
  • Олдфаг
  • *****
  • Сообщений: 9059
  • Рейтинг: 88
  • Пол: Мужской
  • Афтар
    • Просмотр профиля
    • Мой блог
  • Откуда: Орёл
Ну контролеры домены вы меня хоть стреляйте предпочту оставить физическими 2шт.
Одного достаточно. Ты вообще что хочешь-то, всё это с физических серваков в виртульаные перевести или просто как файловое хранилище для своих серверов использовать?

Оффлайн Triangle

  • Модераторы
  • Олдфаг
  • *****
  • Сообщений: 7128
  • Рейтинг: 48
  • Пол: Мужской
  • Откуда: замкадыш
Я хочу оставить физическими только DC, сейчас у меня пока физические это чанга и файловый сервер.
Тетрис научил нас жизненно важному пониманию, успехи исчезают, ошибки накапливаются.

Оффлайн VaD_

  • Постоялец
  • ***
  • Сообщений: 255
  • Рейтинг: 10
    • Просмотр профиля
  • Откуда: Баян-Улгийский Аймаг
Цитата: Triangle от Сегодня в 13:32:42

    и 50, я ошибся, поправил.

это уже рискованно. можно потерей всего двух дисков сломать весь рейд.
Нормально. Небольшие R5 и хот спейры. Чтобы быстро ребилдились. Вполне сопоставимо с R10, но выигрыш по объёму.
Кроме того, я думаю, что Интернет должен быть разрушен (C) Катон Старший

Оффлайн VanDyke

  • Модераторы
  • Ветеран
  • *****
  • Сообщений: 1800
  • Рейтинг: 73
  • Пол: Мужской
  • Network Warrior
    • Просмотр профиля
  • Откуда: Destination network unreachable
Небольшие R5 и хот спейры. Чтобы быстро ребилдились. Вполне сопоставимо с R10, но выигрыш по объёму.
R5 никогда не будет сопоставим с R10. а я даже от R10 отказался в пользу 2 R1.
Not as ultimate as 42, but pretty close...

Оффлайн VaD_

  • Постоялец
  • ***
  • Сообщений: 255
  • Рейтинг: 10
    • Просмотр профиля
  • Откуда: Баян-Улгийский Аймаг
можно потерей всего двух дисков сломать весь рейд.
Вероятность, что откажут два диска именно в одном R1 или R5? КМК если на это закладываться, то одновременно надо предусмотреть противометеоритную защиту. :D

Ну и бэкапы - наше всё. Тут риск - время восстановления сервиса.


Updated: 15 July 2016, 14:54:15

R5 никогда не будет сопоставим с R10.
Я про R50. Про то, что R5 в нём должны быть "маленькие". И по количеству дисков, и по их объёмам. ИМХО сегодня R5 из трёх дисков вполне сопоставим по надёжности с R1. КМК даже из четырёх дисков сопоставим. Ну а сколько ты их в 0 склеишь.. Понятно, что чем больше, тем надёжность ниже.
« Последнее редактирование: 15 июля 2016, 14:55:31 от VaD_ »
Кроме того, я думаю, что Интернет должен быть разрушен (C) Катон Старший

Оффлайн shurutov

  • Постоялец
  • ***
  • Сообщений: 326
  • Рейтинг: 3
  • Пол: Мужской
    • mshurutov@jabber.ru
    • Просмотр профиля
  • Откуда: СССР
VaD_, я вот видел, когда в 10-м рейде из 4-х дисков вылетало одновременно три. И?
С уважением,
Шурутов Михаил.

Оффлайн Triangle

  • Модераторы
  • Олдфаг
  • *****
  • Сообщений: 7128
  • Рейтинг: 48
  • Пол: Мужской
  • Откуда: замкадыш
Ок, возможно тогда R10+hotspare+ssd cache?
Тетрис научил нас жизненно важному пониманию, успехи исчезают, ошибки накапливаются.

Оффлайн VanDyke

  • Модераторы
  • Ветеран
  • *****
  • Сообщений: 1800
  • Рейтинг: 73
  • Пол: Мужской
  • Network Warrior
    • Просмотр профиля
  • Откуда: Destination network unreachable
Вероятность, что откажут два диска именно в одном R1 или R5?
не надо отказа двух. достаточно одного, а на другом чтобы попался битый сектор. железячный контроллер сразу впадает в ступор от такого чуда и не знает чего ему дальше делать.
а прогонять 5-й рейд даже раз в месяц может быть уже накладно.
Not as ultimate as 42, but pretty close...

Оффлайн Triangle

  • Модераторы
  • Олдфаг
  • *****
  • Сообщений: 7128
  • Рейтинг: 48
  • Пол: Мужской
  • Откуда: замкадыш
shurutov, подозреваю что они не мониторились никогда? Или? Хотя у меня как то с разницей в три часа вылетело 2 диска в десятке, и болячек то было по мониторингу у одного 5 ремапов у другого 3, а потом хрясь и всё.
Тетрис научил нас жизненно важному пониманию, успехи исчезают, ошибки накапливаются.

Оффлайн Dr.Pilulkin

  • Пользователь
  • **
  • Сообщений: 81
  • Рейтинг: 4
    • Просмотр профиля
Вероятность, что откажут два диска именно в одном R1 или R5? КМК если на это закладываться, то одновременно надо предусмотреть противометеоритную защиту.
Вот вообще лихко. Особенно, если полка новая и все диски из одной партии. Так же, регулярно наблюдаю прекрасное в R6, когда отваливается один диск, и ещё у трёх-четырёх присутствуют ошибки чтения. В итоге слои ломаются и привет - uncorrectable errors.

Оффлайн VanDyke

  • Модераторы
  • Ветеран
  • *****
  • Сообщений: 1800
  • Рейтинг: 73
  • Пол: Мужской
  • Network Warrior
    • Просмотр профиля
  • Откуда: Destination network unreachable
ещё у трёх-четырёх присутствуют ошибки чтения
если чанки не пересекаются то контроллеру на это должно быть пофиг.
Not as ultimate as 42, but pretty close...

Оффлайн VaD_

  • Постоялец
  • ***
  • Сообщений: 255
  • Рейтинг: 10
    • Просмотр профиля
  • Откуда: Баян-Улгийский Аймаг
VaD_, я вот видел, когда в 10-м рейде из 4-х дисков вылетало одновременно три. И?
Я видел как с фейерверками вылетал крупный ВЦ целиком. Последним умер дизельгенератор. И?

Вероятности отказа считаются. Это не абсолютные цифры, конечно, но R10 и R50 вполне можно сравнить при прочих равных условиях. Слотов для дисков у тебя одно и то же количество. Ёмкость R5 минимум в полтора раза выше, чем R1. Больше рабочий объём или места для hot spare.

И да, для R6 hot spare не нужен. Успеешь добежать и отребилдиться по-любому. Если конечно (хинт :idea:) не в другом городе СХД и за дисками следишь, а не по принципу "работает - не трогай".


Updated: 15 July 2016, 15:54:38

Вероятность, что откажут два диска именно в одном R1 или R5?
не надо отказа двух. достаточно одного, а на другом чтобы попался битый сектор. железячный контроллер сразу впадает в ступор от такого чуда и не знает чего ему дальше делать.
а прогонять 5-й рейд даже раз в месяц может быть уже накладно.
У нас постоянно скраб по агрегатам гоняется.

И да, за дисками смотреть надо. Три года прошло и начинаешь процесс плановой замены независимо от того, что тебе смарт показывает. В целом, в масштабе компании, это дешевле выходит. :D
« Последнее редактирование: 15 июля 2016, 15:54:38 от VaD_ »
Кроме того, я думаю, что Интернет должен быть разрушен (C) Катон Старший

Оффлайн Retif

  • Администраторы
  • Олдфаг
  • *****
  • Сообщений: 9059
  • Рейтинг: 88
  • Пол: Мужской
  • Афтар
    • Просмотр профиля
    • Мой блог
  • Откуда: Орёл
И да, для R6 hot spare не нужен. Успеешь добежать и отребилдиться по-любому.
Если в схд несколько рейдов, можно глобальную хотспару юзать. А то вдруг все же? ))

Оффлайн Dr.Pilulkin

  • Пользователь
  • **
  • Сообщений: 81
  • Рейтинг: 4
    • Просмотр профиля
ещё у трёх-четырёх присутствуют ошибки чтения
если чанки не пересекаются то контроллеру на это должно быть пофиг.
Я и имел ввиду пересекающиеся, когда ни одну сумму уже невозможно посчитать. Всё остальное consistency check поправит.
Всякие xfs с данными такое ещё нормально переживают - просто ломаются иноды и некоторые файлы, а вот системные ext3 начинают сильно-сильно волноваться и уходят в rdonly. И особенное счастье наступает, когда это происходит с /var - логи, локи, спулы, вот это всё :blush2:
Это я к тому, что даже одного вылетевшего диска в R6 может хватить для того, чтобы тебе позвонили ночью и начали громко говорить матом, не говоря уже о R5 :spiteful: