Улучшение скорости записи mdadm RAID-6

У меня есть домашний сервер mdadm RAID-6 с жесткими дисками WD Green 5x1Tb. Скорость чтения более чем достаточно - 268 Мб / с в дд. Но скорость записи всего 37,1 Мб / с. (Оба протестированы с помощью dd для файла 48 ГБ, объем оперативной памяти составляет 1 ГБ, размер блока, использованного в тестировании, составляет 8 КБ)

Не могли бы вы подсказать, почему скорость записи такая низкая и есть ли способы ее улучшить? Загрузка ЦП во время записи составляет всего 25% (т.е. половина от 1 ядра Opteron 165). Никаких важных для бизнеса данных нет, а сервер поддерживается ИБП.

mdstat это:

Personalities : [raid6] [raid5] [raid4]
md0 : active raid6 sda1[0] sdd1[4] sde1[3] sdf1[2] sdb1[1]
      2929683456 blocks super 1.2 level 6, 1024k chunk, algorithm 2 [5/5] [UUUUU]
      bitmap: 0/8 pages [0KB], 65536KB chunk

unused devices: <none>

Какие-либо предложения?

Такие вещи, как обратная связь, барьер, ничто не помогло. Размер блока DD = 1M, 8M ничего не изменило. Похоже, что mdadm физически читает сектора для вычисления четности, даже если это не имеет значения ... Это правильно?

Обновление: Ухудшение скорости после изменения кэша чередующихся полос было на самом деле из-за того, что 1 жесткий диск, вероятно, вышел из строя во время тестирования

Решено: после увеличения полосового кэша и переключения на внешнее растровое изображение мои скорости записи 160 Мбит / с, чтения 260 Мбит / с. :-D

Вы пробовали настроить / sys / block / mdX / md / stripe_cache_size?

Согласно этому сообщению на форуме (на норвежском языке, извините) «настройка этого параметра тем важнее, чем больше дисков и тем быстрее ваша система»:

В моей системе я получаю наилучшую производительность, используя значение 8192. Если я использую значение по умолчанию 256, производительность записи падает на 66%.

Приведем его скорость для сравнения:

Диски: 8xSeagate 2TB LP (5900 об / мин) в mdadm RAID6 (-n 512) (stripe_size_cache = 8192).

Процессор: Intel X3430 (4x2,4 ГГц, 8 ГБ памяти DDR3 ECC)

Скорость: 387 МБ / с последовательной записи, 704 МБ / с последовательного чтения, 669 случайных операций поиска в секунду.

Мой домашний сервер имеет почти те же диски, что и вы, используя RAID 5:

Диски: 4x1,5 ТБ WD Green в RAID 5 (stripe_size_cache = 256 - по умолчанию)

Процессор: Intel i7 920 (2,66 ГГц, 6 ГБ ОЗУ)

Скорость: 60 МБ / с последовательной записи, 138 МБ / с последовательной записи (согласно Бонни ++)

Таким образом, похоже, что производительность последовательной записи составляет около 50% производительности чтения.

В отношении ожидаемой производительности Linux Raid Wiki говорит о RAID 5:

Операции чтения почти аналогичны операциям чтения RAID-0, операции записи могут быть либо достаточно дорогими (требуются операции чтения перед записью, чтобы иметь возможность вычислить правильную информацию о четности, например при операциях с базами данных), либо аналогичны RAID-1. записи (когда выполняются большие последовательные записи, и четность может быть вычислена непосредственно из других блоков, которые должны быть записаны).

А насчет RAID 6:

Производительность чтения аналогична RAID-5, но производительность записи хуже.

пытаться

echo 32768 > /sys/block/md0/md/stripe_cache_size

и проверить;)