[Moscow.pm] Как незаметно для других скушать дисковый ресурс других серверов?
dmitry на eremeev.ru
dmitry на eremeev.ru
Сб Авг 4 08:35:43 PDT 2012
Херасе. А что за проект, если не секрет?)
Sent from my stupid BlackBerry®
-----Original Message-----
From: Михаил Монашёв <postmaster на softsearch.ru>
Sender: "Moscow-pm" <moscow-pm-bounces+dmitry=eremeev.ru на pm.org>Date: Sat, 4 Aug 2012 19:33:21
To: Moscow.pm group<moscow-pm на pm.org>
Reply-To: "Moscow.pm group" <moscow-pm на pm.org>
Subject: [Moscow.pm] Как незаметно для других скушать дисковый ресурс других серверов?
Здравствуйте.
Есть 10 серверов. На каждом сервере запускается один и mysql-сервер и
100 экземпляров одного перлового скрипта (с минимальным приоритетом,
чтобы им оставалось только неизрасходованное процессорное время) . Это
скрипт пишет очень много данных на все сервера в mysql-и. Диски
перестают справляться с запросами на запись и все другие процессы,
которые читают или пишут в те же mysql-и начинают тормозить. Т.е. надо
придумать, как отдавать этому скрипту только свободный дисковый ресурс
другого сервера, да так, чтобы другие более важные процессы,
обращающиеся к этим же mysql-ям, не тормозили.
Основная проблема в том,
что нагрузку на одном сервере создаёт процесс с другого и из-за этого
приходится мониторить нагрузку периодически, а не постоянно. А она
меняется с момента измерения. Кроме того, в зависимости от самой
нагрузки приходится выставлять разные границы, когда нагрузка
считается высокой. В качестве показателя дисковой нагрузки я использую
время выполнения одной операции чтения/записи. Чтобы гасить нагрузку я
делаю Time::HiRes::sleep($timeout) и меняя этот $timeout пытаюсь
адаптироваться под текущую нагрузку.
Операционка FreeBSD 8.X.
Сейчас зашёл в тупик, ибо нифига не выходит сделать адаптирующиеся под
текущую нагрузку алгоритм. Всегда выходит две крайности: или много
неоправданного простоя или диски перегружены и всё тормозит.
--
С уважением,
Михаил mailto:postmaster на softsearch.ru
--
Moscow.pm mailing list
moscow-pm на pm.org | http://moscow.pm.org
Подробная информация о списке рассылки Moscow-pm