Автор Тема: Есть у кого опыт в hiload веб-проектах ?  (Прочитано 3749 раз)

0 Пользователей и 1 Гость просматривают эту тему.

Оффлайн FessAectan

  • Модератор
  • Старожил
  • *****
  • Сообщений: 972
  • Рейтинг: 25
  • Пол: Мужской
  • На пути к просветлению
    • fessae@jabber.ru
    • fessae
    • Просмотр профиля
    • https://vistep.ru/
  • Откуда: vistep.ru
Всем привет!

Камрады, нужен человек с опытом работы с высоконагружеными проектами.
В кратце суть:
раздача видеоконтента, траф около 10Гбит/с;
требуется посоветовать правильное архитектурное решение, настройки nginx и прочих обвязок

если ты тот самый - стукни в личку плиз

ps
сорь, что в курилку
Мы переоцениваем себя завтрашнего, поэтому и страдаем прокрастинацией.

Оффлайн diggerzz

  • Пользователь
  • **
  • Сообщений: 75
  • Рейтинг: 4
  • Пол: Мужской
  • Простой и добрый либерал
    • Просмотр профиля
  • Откуда: Москва
Есть у кого опыт в hiload веб-проектах ?
« Ответ #1 : 16 октября 2015, 21:14:04 »
FessAectan,
Дык Селениус жЫ.
Он нас покинул, но контакты-то должны были остаться у кого-никого?

Оффлайн FessAectan

  • Модератор
  • Старожил
  • *****
  • Сообщений: 972
  • Рейтинг: 25
  • Пол: Мужской
  • На пути к просветлению
    • fessae@jabber.ru
    • fessae
    • Просмотр профиля
    • https://vistep.ru/
  • Откуда: vistep.ru
Есть у кого опыт в hiload веб-проектах ?
« Ответ #2 : 16 октября 2015, 21:14:55 »
diggerzz, тоже про него думал, подождем - может кто даст его контакт
Мы переоцениваем себя завтрашнего, поэтому и страдаем прокрастинацией.

Оффлайн ppsh

  • Постоялец
  • ***
  • Сообщений: 145
  • Рейтинг: 9
  • Стратегический поэт особого назначения
    • Просмотр профиля
  • Откуда: KO85TU
Есть у кого опыт в hiload веб-проектах ?
« Ответ #3 : 16 октября 2015, 21:17:54 »
FessAectan Спрашивай
-ЦУП! У нас вышел из строя компьютер! Что делать??
-Играйте на запасном! Повторяю! Играйте на запасном!

Оффлайн shs

  • Модератор
  • Ветеран
  • *****
  • Сообщений: 4401
  • Рейтинг: 89
    • Просмотр профиля
    • ShS's blog
  • Откуда: Default city
Есть у кого опыт в hiload веб-проектах ?
« Ответ #4 : 16 октября 2015, 21:20:06 »
Дык сэнсей жЫ

Оффлайн Axxe

  • Постоялец
  • ***
  • Сообщений: 117
  • Рейтинг: 28
    • Просмотр профиля
  • Откуда: 66-77-..
Есть у кого опыт в hiload веб-проектах ?
« Ответ #5 : 16 октября 2015, 21:25:16 »
Дык Селениус жЫ.
д. https://www.facebook.com/selen.myth
плюс denivip.ru - пообщайся пока "на холодную", если что - дам рекомендацию внутри.
никогда не встанут на колени
даже если заберут их в плен
смелые и гордые тюлени

Оффлайн FessAectan

  • Модератор
  • Старожил
  • *****
  • Сообщений: 972
  • Рейтинг: 25
  • Пол: Мужской
  • На пути к просветлению
    • fessae@jabber.ru
    • fessae
    • Просмотр профиля
    • https://vistep.ru/
  • Откуда: vistep.ru
Есть у кого опыт в hiload веб-проектах ?
« Ответ #6 : 16 октября 2015, 21:30:31 »
ppsh,
в качестве стораджа openstack swift, две прокси-ноды, три сторадж-ноды
там все ок

трафик от клиентов гонится на кеширующие прокси-серверы(Debian 8, kernel 4.2), настроен nginx с proxy_stor
temp кладется на рейд-0 из 4х300 САС винтов, сам кеш на 4х512Гб ссд, ФС - xfs
сейчас три прокси, все дохнут от iowait
вопрос:
добавлять прокси или менять что-то в настройках ОС/софта/железа?
Мы переоцениваем себя завтрашнего, поэтому и страдаем прокрастинацией.

Оффлайн ppsh

  • Постоялец
  • ***
  • Сообщений: 145
  • Рейтинг: 9
  • Стратегический поэт особого назначения
    • Просмотр профиля
  • Откуда: KO85TU
Есть у кого опыт в hiload веб-проектах ?
« Ответ #7 : 16 октября 2015, 21:33:40 »
в качестве стораджа openstack swift, две прокси-ноды, три сторадж-ноды
там все ок
Балбес!Я грю - контак ты Паши дать могу.Я то занят счас!
-ЦУП! У нас вышел из строя компьютер! Что делать??
-Играйте на запасном! Повторяю! Играйте на запасном!

Оффлайн FessAectan

  • Модератор
  • Старожил
  • *****
  • Сообщений: 972
  • Рейтинг: 25
  • Пол: Мужской
  • На пути к просветлению
    • fessae@jabber.ru
    • fessae
    • Просмотр профиля
    • https://vistep.ru/
  • Откуда: vistep.ru
Есть у кого опыт в hiload веб-проектах ?
« Ответ #8 : 16 октября 2015, 21:34:51 »
ppsh, дык ты яснее выражайся )


Updated: 16 October 2015, 21:36:44

Axxe, оке, спс
Мы переоцениваем себя завтрашнего, поэтому и страдаем прокрастинацией.

Онлайн Retif

  • Администраторы
  • Олдфаг
  • *****
  • Сообщений: 9071
  • Рейтинг: 88
  • Пол: Мужской
  • Афтар
    • Просмотр профиля
    • Мой блог
  • Откуда: Орёл
Есть у кого опыт в hiload веб-проектах ?
« Ответ #9 : 16 октября 2015, 21:36:58 »
Дык сэнсей жЫ
+1, он по хайлоаду мегаспец.

Оффлайн FessAectan

  • Модератор
  • Старожил
  • *****
  • Сообщений: 972
  • Рейтинг: 25
  • Пол: Мужской
  • На пути к просветлению
    • fessae@jabber.ru
    • fessae
    • Просмотр профиля
    • https://vistep.ru/
  • Откуда: vistep.ru
Есть у кого опыт в hiload веб-проектах ?
« Ответ #10 : 16 октября 2015, 21:39:08 »
shs, Retif, ок, понял
Мы переоцениваем себя завтрашнего, поэтому и страдаем прокрастинацией.

Оффлайн shurutov

  • Постоялец
  • ***
  • Сообщений: 326
  • Рейтинг: 3
  • Пол: Мужской
    • mshurutov@jabber.ru
    • Просмотр профиля
  • Откуда: СССР
Есть у кого опыт в hiload веб-проектах ?
« Ответ #11 : 16 октября 2015, 23:34:23 »
Начиная с версии 0.8.9, временный файл и постоянное место хранения ответа могут располагаться на разных файловых системах. Однако нужно учитывать, что в этом случае вместо дешёвой операции переименовывания в пределах одной файловой системы файл копируется с одной файловой системы на другую.

А ты видеоконтент гонишь, который весит весьма прилично. Неудивительно, что у тебя иовейт улетел в дальние дали.
С уважением,
Шурутов Михаил.

Оффлайн FessAectan

  • Модератор
  • Старожил
  • *****
  • Сообщений: 972
  • Рейтинг: 25
  • Пол: Мужской
  • На пути к просветлению
    • fessae@jabber.ru
    • fessae
    • Просмотр профиля
    • https://vistep.ru/
  • Откуда: vistep.ru
Есть у кого опыт в hiload веб-проектах ?
« Ответ #12 : 17 октября 2015, 01:37:01 »
shurutov,
кручу vm.dirty_* сейчас, удалось понизить iowait
Мы переоцениваем себя завтрашнего, поэтому и страдаем прокрастинацией.

Оффлайн shurutov

  • Постоялец
  • ***
  • Сообщений: 326
  • Рейтинг: 3
  • Пол: Мужской
    • mshurutov@jabber.ru
    • Просмотр профиля
  • Откуда: СССР
Есть у кого опыт в hiload веб-проектах ?
« Ответ #13 : 17 октября 2015, 08:10:01 »
И да, три - это с моей скромной точки зрения таки маловато на 10Гб.
С уважением,
Шурутов Михаил.

Оффлайн Axxe

  • Постоялец
  • ***
  • Сообщений: 117
  • Рейтинг: 28
    • Просмотр профиля
  • Откуда: 66-77-..
Есть у кого опыт в hiload веб-проектах ?
« Ответ #14 : 17 октября 2015, 09:42:52 »
ваш покорный слуга в технике этих вебкастов лишь свечку держал да патроны подтаскивал. но если коротко - целевая география вещания, отсюда и архитектура. самый логичный но недешёвый способ - сдаться в какую-нибудь cdn. ну или пилить своё до посинения как полная противоположность. а в итоге выяснить что на архитектуру и технику глобально почти похуй, т. к. тема хоть и модная (была. лет 5-6 назад), но глубоко убыточная, и если очень повезёт - продаться как tvigle. либо трепыхаться дальше как ivi. или уйти под мешок с деньгами как now. либо сдохнуть нахуй в корчах бесперспективности как omlet и стопицот других.

PS денивип кстати сделал процентов 80-90 подобных проектов
PPS если что - с подобными гигазами в секунду трафика есть лайфньюс - вот там очень клёвые технари, контакты в личку. и дождь тоже есть, но буквально пару лет тому в дожде была архитектурная печалька, так что их я рекомендовать не могу + мы с ними не столь плотно общаемся.
« Последнее редактирование: 17 октября 2015, 09:58:51 от Axxe »
никогда не встанут на колени
даже если заберут их в плен
смелые и гордые тюлени