Автор Тема: ESXi медленно читает с NFS  (Прочитано 3157 раз)

0 Пользователей и 1 Гость просматривают эту тему.

Оффлайн Flyer_SPb

  • Модераторы
  • Ветеран
  • *****
  • Сообщений: 1018
  • Рейтинг: 26
  • Пол: Мужской
  • Ветеран войны с Kilrathi
    • Просмотр профиля
  • Откуда: 2:5030
ESXi медленно читает с NFS
« : 20 февраля 2016, 13:11:49 »
ESXi 5.0, управляется vCenter 6.0 (в процессе перехода)

NFS - Centos 6.7
есть несколько аналогичных, но с более старой системой и там проблем нет, этот по железу отличается тем, что у него
помимо массива R6 на адаптеке есть nvme (Intel) 2TB и 10Gb сеть.

Сфера быстро (упираясь в свою сеть 1Gb) пишет на этот NFS (и nvme, и R6), но очень медленно читает (порядка 10-20Mb)
Это относится и к миграции на/с этого NFS, и к работе ВМ, лежащих на этом NFS.
Диск при этом совершенно не нагружен.

При подключении к тому же NFS с другого аналогичного стораджа или даже напрямую с той же виртуалки, что на нём же лежит и на том же ESXi крутится - при чтении тех же файлов получаем 600-800Mb, упираясь в тот же 1Gb (с учётом и другой его нагрузки).
They stole my gun, my beautiful Steltek gun!

Оффлайн VanDyke

  • Модераторы
  • Ветеран
  • *****
  • Сообщений: 1800
  • Рейтинг: 73
  • Пол: Мужской
  • Network Warrior
    • Просмотр профиля
  • Откуда: Destination network unreachable
ESXi медленно читает с NFS
« Ответ #1 : 20 февраля 2016, 13:23:34 »
Flyer_SPb, а tcpdump не пробовал смотреть? мож там ретрансмиты, или jumbo где не надо, или окно маленькое.
Not as ultimate as 42, but pretty close...

Оффлайн Flyer_SPb

  • Модераторы
  • Ветеран
  • *****
  • Сообщений: 1018
  • Рейтинг: 26
  • Пол: Мужской
  • Ветеран войны с Kilrathi
    • Просмотр профиля
  • Откуда: 2:5030
ESXi медленно читает с NFS
« Ответ #2 : 20 февраля 2016, 13:40:40 »
VanDyke, пока не пробовал.
jumbo там не должно быть, ибо у нас на всех хостах и стораджах MTU 1486 (это уж несколько лет так, были проблемы, которые таким образом решились).

Ретрансмиты возможно, но почему только ESXi?
И почему только с этим стораджем?
They stole my gun, my beautiful Steltek gun!

Оффлайн Flyer_SPb

  • Модераторы
  • Ветеран
  • *****
  • Сообщений: 1018
  • Рейтинг: 26
  • Пол: Мужской
  • Ветеран войны с Kilrathi
    • Просмотр профиля
  • Откуда: 2:5030
ESXi медленно читает с NFS
« Ответ #3 : 24 февраля 2016, 15:53:52 »
tcpdump ничего, видимого для меня, не показал.

ESXi 6.0 читает с нормальной скоростью.
А вот ESXi 5.0 - с тормозами. Любой 5.0 хост с этого и только этого стораджа.

They stole my gun, my beautiful Steltek gun!

Оффлайн oink :)

  • Постоялец
  • ***
  • Сообщений: 337
  • Рейтинг: 8
  • Пол: Мужской
  • глумливый прислужник
    • Просмотр профиля
  • Откуда: 127.0.0.1
"Вы держитесь здесь, вам всего доброго, хорошего настроения и здоровья" (c) Медведев

Оффлайн Flyer_SPb

  • Модераторы
  • Ветеран
  • *****
  • Сообщений: 1018
  • Рейтинг: 26
  • Пол: Мужской
  • Ветеран войны с Kilrathi
    • Просмотр профиля
  • Откуда: 2:5030
ESXi медленно читает с NFS
« Ответ #5 : 24 февраля 2016, 17:10:42 »
oink :), это видел.
Не похоже.
У меня тормоза на 5.0, а 6.0 работает нормально.
И на всех хостах ESXi только гигабит, а десятка лишь на этом сторадже.
They stole my gun, my beautiful Steltek gun!

Оффлайн Flyer_SPb

  • Модераторы
  • Ветеран
  • *****
  • Сообщений: 1018
  • Рейтинг: 26
  • Пол: Мужской
  • Ветеран войны с Kilrathi
    • Просмотр профиля
  • Откуда: 2:5030
ESXi медленно читает с NFS
« Ответ #6 : 15 марта 2016, 00:01:21 »
Заменили сетевушку в сторадже.
Тоже Intel, тоже двухголовая, но на те же самые sfp тот же самый драйвер ixgbe ругнулся, пришлось ему сказать allow_unsupported_sfp=1
Заодно подключили и одну из медных набортных 10Gb, но только к 1Gb порту.

В результате, и ESXi 5.0, и ESXi 6.0, и по меди, и по оптике читает с нормальной скоростью, упираясь в 1Gb.
They stole my gun, my beautiful Steltek gun!