Форум системных администраторов

IT => Виртуализация => Тема начата: Flyer_SPb от 20 февраля 2016, 13:11:49

Название: ESXi медленно читает с NFS
Отправлено: Flyer_SPb от 20 февраля 2016, 13:11:49
ESXi 5.0, управляется vCenter 6.0 (в процессе перехода)

NFS - Centos 6.7
есть несколько аналогичных, но с более старой системой и там проблем нет, этот по железу отличается тем, что у него
помимо массива R6 на адаптеке есть nvme (Intel) 2TB и 10Gb сеть.

Сфера быстро (упираясь в свою сеть 1Gb) пишет на этот NFS (и nvme, и R6), но очень медленно читает (порядка 10-20Mb)
Это относится и к миграции на/с этого NFS, и к работе ВМ, лежащих на этом NFS.
Диск при этом совершенно не нагружен.

При подключении к тому же NFS с другого аналогичного стораджа или даже напрямую с той же виртуалки, что на нём же лежит и на том же ESXi крутится - при чтении тех же файлов получаем 600-800Mb, упираясь в тот же 1Gb (с учётом и другой его нагрузки).
Название: ESXi медленно читает с NFS
Отправлено: VanDyke от 20 февраля 2016, 13:23:34
Flyer_SPb, а tcpdump не пробовал смотреть? мож там ретрансмиты, или jumbo где не надо, или окно маленькое.
Название: ESXi медленно читает с NFS
Отправлено: Flyer_SPb от 20 февраля 2016, 13:40:40
VanDyke, пока не пробовал.
jumbo там не должно быть, ибо у нас на всех хостах и стораджах MTU 1486 (это уж несколько лет так, были проблемы, которые таким образом решились).

Ретрансмиты возможно, но почему только ESXi?
И почему только с этим стораджем?
Название: ESXi медленно читает с NFS
Отправлено: Flyer_SPb от 24 февраля 2016, 15:53:52
tcpdump ничего, видимого для меня, не показал.

ESXi 6.0 читает с нормальной скоростью.
А вот ESXi 5.0 - с тормозами. Любой 5.0 хост с этого и только этого стораджа.

Название: ESXi медленно читает с NFS
Отправлено: oink :) от 24 февраля 2016, 17:03:14
Flyer_SPb, это не оно? https://kb.vmware.com/selfservice/microsites/search.do?language=en_US&cmd=displayKC&externalId=2120163
Название: ESXi медленно читает с NFS
Отправлено: Flyer_SPb от 24 февраля 2016, 17:10:42
oink :), это видел.
Не похоже.
У меня тормоза на 5.0, а 6.0 работает нормально.
И на всех хостах ESXi только гигабит, а десятка лишь на этом сторадже.
Название: ESXi медленно читает с NFS
Отправлено: Flyer_SPb от 15 марта 2016, 00:01:21
Заменили сетевушку в сторадже.
Тоже Intel, тоже двухголовая, но на те же самые sfp тот же самый драйвер ixgbe ругнулся, пришлось ему сказать allow_unsupported_sfp=1
Заодно подключили и одну из медных набортных 10Gb, но только к 1Gb порту.

В результате, и ESXi 5.0, и ESXi 6.0, и по меди, и по оптике читает с нормальной скоростью, упираясь в 1Gb.