про суровую реальность :)

2 года назад я купил WD MyBook Premium Edition II, буквально пару часов назад мой mac mini выдал ошибку и попросил проверить массив, WD-шный manager сказал, что массив в состоянии degraded и один из дисков(первый, диск А) помечен как неисправный. Массив я разобрал, не без помощи коллеги(превед маг), попытался вытащить и вставить этиот диск и подключить его снова, рейд попытался пересобраться, но не получилось, завтра поеду за новыми дисками. В стоке там стояли 2 диска по 500 в raid-1, я использовал его для хранения своих фото и видео, ибо много фоток сделанных ранее уже терял. Ну вот рейд и пригодился Завтра куплю 2 терабайтника green серии.

Собственно, мы тестируем железку Dell PE2950: 2 x Xeon E5420 / 16 G RAM / 6×300 SAS (raid 10). Мы создаем базу sqlite на 200млн записей и делаем рандомные селекты, все это делается скриптом на питоне, если надо исходники приведу.  В обычных условиях мы получаем 2500 селектов в секунду по индексированному строковому полю. Если делаем в несколько потоков, то при максимальном числе потоков 7 – получаем примерно 11-12.5 тысяч запросов в секунду. Вопрос, что ограничивает? почему один поток не может сделать столько запросов? Явно не процессор, он простаивает. Пробовал крутить линуксовые limits, не помогает. При запуске 3 процессов по 7 потоков получаем макисмально 25 тысяч запросов в секунду, но iostat уже показывает 1700 TPS.