Miglioramento della velocità di scrittura mdadm RAID-6

Ho un mdadm RAID-6 nel mio server di casa di HDD WD Green da 5x1Tb. La velocità di lettura è più che sufficiente: 268 Mb / s in gg. Ma la velocità di scrittura è di soli 37,1 Mb / s. (Entrambi testati tramite dd su file da 48 GB, la dimensione della RAM è di 1 GB, la dimensione del blocco utilizzata nel test è di 8 KB)

Potresti suggerire perché la velocità di scrittura è così bassa e ci sono modi per migliorarla? L'utilizzo della CPU durante la scrittura è solo del 25% (ovvero la metà di 1 core di Opteron 165) Nessun dato critico per l'azienda e il server è supportato da UPS.

mdstat è:

Personalities : [raid6] [raid5] [raid4]
md0 : active raid6 sda1[0] sdd1[4] sde1[3] sdf1[2] sdb1[1]
      2929683456 blocks super 1.2 level 6, 1024k chunk, algorithm 2 [5/5] [UUUUU]
      bitmap: 0/8 pages [0KB], 65536KB chunk

unused devices: <none>

Eventuali suggerimenti?

Cose come writeback, barrier, nobh non hanno aiutato. DD blockize = 1M, 8M non ha cambiato nulla. Sembra che mdadm legga fisicamente i settori per calcolare la parità anche se non ha importanza ... È corretto?

Aggiornamento: il degrado della velocità dopo la cache stripe alterata era in realtà dovuto al fatto che 1 HDD probabilmente non è riuscito durante il test, bello MrGreen

Risolto: dopo aver aumentato la cache stripe e il passaggio a bitmap esterna, le mie velocità sono di 160 Mb / s in scrittura, 260 Mb / s in lettura. :-D

Hai provato a sintonizzare / sys / block / mdX / md / stripe_cache_size?

Secondo questo post del forum (in norvegese, scusa) "ottimizzare questo parametro è più essenziale più dischi e più veloce sarà il sistema":

Sul mio sistema ottengo le migliori prestazioni usando il valore 8192. Se uso il valore predefinito di 256, le prestazioni di scrittura diminuiscono del 66%.

Citando la sua velocità per il confronto:

Dischi: 8xSeagate 2TB LP (5900 RPM) in mdadm RAID6 (-n 512) (stripe_size_cache = 8192).

CPU: Intel X3430 (4x2.4GHz, RAM ECC DDR3 da 8 GB)

Velocità: 387 MB / s in scrittura sequenziale, 704 MB / s in lettura sequenziale, 669 ricerche casuali al secondo.

Il mio server di casa ha quasi gli stessi dischi di te, usando RAID 5:

Dischi: 4x1.5 TB WD Green in RAID 5 (stripe_size_cache = 256 - impostazione predefinita)

CPU: Intel i7 920 (2,66 GHz, 6 GB RAM)

Velocità: 60 MB / s in scrittura sequenziale, 138 MB / s in lettura sequenziale (secondo Bonnie ++)

Quindi sembra che le prestazioni in scrittura sequenziale siano circa il 50% delle prestazioni in lettura.

Per quali prestazioni aspettarsi, il wiki Raid di Linux dice di RAID 5:

Le letture sono quasi simili alle letture RAID-0, le scritture possono essere piuttosto costose (richiedere la lettura prima della scrittura, al fine di poter calcolare le informazioni di parità corrette, come nelle operazioni del database), o simili a RAID-1 scritture (quando vengono eseguite scritture sequenziali più grandi e la parità può essere calcolata direttamente dagli altri blocchi da scrivere).

E su RAID 6:

Le prestazioni di lettura sono simili a RAID-5 ma le prestazioni di scrittura sono peggiori.

provare

echo 32768 > /sys/block/md0/md/stripe_cache_size

e controllare;)