Strona 1 z 3

Nowy serwer, wolny RAID

: 13 sierpnia 2010, 09:31
autor: cooleq
Witam.
Uruchamiam właśnie mały serwer, na razie samby, i jestem w fazie testów, niestety zauważyłem, że macierz nie jest zbyt szybka. Są to 4 dyski 0,5T WD SATA złączone systemowym RAID5.
Prędkość zapisu (jednego dużego pliku) wynosi 10MB/s odczytu około 13MB/s natomiast kopiowania w ramach macierzy ledwie 5MB/s.
Czy to jest to normalne, że to tak wolno działa. Ja na swoim dysku w laptopie mogę zapisywać z prędkością około 20MB/s a macierz mimo, że to nie jest 1 tylko 5 i tak powinna przyspieszyć pracę.

: 13 sierpnia 2010, 11:51
autor: Pacek
Może zanim zmontujesz macierz spróbuj wykonać testy na poszczególnych dyskach:

Kod: Zaznacz cały

hdparm -t /dev/hdx
lub w przypadku dysków sata:

Kod: Zaznacz cały

hdparm -t /dev/sdx
Gdzie x to litera (a,b,c,d itd) określająca kolejny dysk kontrolera SATA/IDE
Możliwe, że transfer (tryb pracy) dysku nie jest ustawiony na maksymalny możliwy.

: 13 sierpnia 2010, 12:12
autor: cooleq
Zanim zamontuję? Tam już jest wszystko zainstalowane, i macierz składa się automatycznie przy starcie systemu i na jednej z partycji tej macierzy jest zainstalowany system, więc nie bardzo wiem co mam zrobić. Uruchomienie z livecd da mi tą możliwość i czy nie zepsuje to zawartości RAID-a?
I tak jeszcze zapytam, skąd mam się dowiedzieć, że któryś z dysków uległ awarii? Czy da się zainstalować jakąś aplikację informującą mnie o awariach np. przez e-mail?

: 13 sierpnia 2010, 13:21
autor: Bastian
&quot pisze:I tak jeszcze zapytam, skąd mam się dowiedzieć, że któryś z dysków uległ awarii? Czy da się zainstalować jakąś aplikację informującą mnie o awariach np. przez e-mail?
Tak, smartmontools.

: 16 sierpnia 2010, 09:17
autor: cooleq
Witam po weekendzie.
Zrobiłem tym narzędziem testy dysków i ja nie widzę w nich nic złego, wklejam:

Kod: Zaznacz cały

smartctl version 5.38 [i686-pc-linux-gnu] Copyright (C) 2002-8 Bruce Allen
Home page is http://smartmontools.sourceforge.net/

=== START OF READ SMART DATA SECTION ===
SMART Attributes Data Structure revision number: 16
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate     0x002f   200   200   051    Pre-fail  Always       -       0
  3 Spin_Up_Time            0x0027   166   166   021    Pre-fail  Always       -       4691
  4 Start_Stop_Count        0x0032   100   100   000    Old_age   Always       -       18
  5 Reallocated_Sector_Ct   0x0033   200   200   140    Pre-fail  Always       -       0
  7 Seek_Error_Rate         0x002e   100   253   000    Old_age   Always       -       0
  9 Power_On_Hours          0x0032   100   100   000    Old_age   Always       -       105
 10 Spin_Retry_Count        0x0032   100   253   000    Old_age   Always       -       0
 11 Calibration_Retry_Count 0x0032   100   253   000    Old_age   Always       -       0
 12 Power_Cycle_Count       0x0032   100   100   000    Old_age   Always       -       16
192 Power-Off_Retract_Count 0x0032   200   200   000    Old_age   Always       -       12
193 Load_Cycle_Count        0x0032   200   200   000    Old_age   Always       -       18
194 Temperature_Celsius     0x0022   106   104   000    Old_age   Always       -       41
196 Reallocated_Event_Count 0x0032   200   200   000    Old_age   Always       -       0
197 Current_Pending_Sector  0x0032   200   200   000    Old_age   Always       -       0
198 Offline_Uncorrectable   0x0030   100   253   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count    0x0032   200   200   000    Old_age   Always       -       0
200 Multi_Zone_Error_Rate   0x0008   100   253   000    Old_age   Offline      -       0

SMART Self-test log structure revision number 1
Num  Test_Description    Status                  Remaining  LifeTime(hours)  LBA_of_first_error
# 1  Short offline       Completed without error       00%       105         -

smartctl version 5.38 [i686-pc-linux-gnu] Copyright (C) 2002-8 Bruce Allen
Home page is http://smartmontools.sourceforge.net/

=== START OF READ SMART DATA SECTION ===
SMART Attributes Data Structure revision number: 16
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate     0x002f   200   200   051    Pre-fail  Always       -       0
  3 Spin_Up_Time            0x0027   167   166   021    Pre-fail  Always       -       4616
  4 Start_Stop_Count        0x0032   100   100   000    Old_age   Always       -       23
  5 Reallocated_Sector_Ct   0x0033   200   200   140    Pre-fail  Always       -       0
  7 Seek_Error_Rate         0x002e   100   253   000    Old_age   Always       -       0
  9 Power_On_Hours          0x0032   100   100   000    Old_age   Always       -       125
 10 Spin_Retry_Count        0x0032   100   253   000    Old_age   Always       -       0
 11 Calibration_Retry_Count 0x0032   100   253   000    Old_age   Always       -       0
 12 Power_Cycle_Count       0x0032   100   100   000    Old_age   Always       -       21
192 Power-Off_Retract_Count 0x0032   200   200   000    Old_age   Always       -       17
193 Load_Cycle_Count        0x0032   200   200   000    Old_age   Always       -       23
194 Temperature_Celsius     0x0022   104   102   000    Old_age   Always       -       43
196 Reallocated_Event_Count 0x0032   200   200   000    Old_age   Always       -       0
197 Current_Pending_Sector  0x0032   200   200   000    Old_age   Always       -       0
198 Offline_Uncorrectable   0x0030   100   253   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count    0x0032   200   200   000    Old_age   Always       -       0
200 Multi_Zone_Error_Rate   0x0008   100   253   000    Old_age   Offline      -       0

SMART Self-test log structure revision number 1
No self-tests have been logged.  [To run self-tests, use: smartctl -t]


smartctl version 5.38 [i686-pc-linux-gnu] Copyright (C) 2002-8 Bruce Allen
Home page is http://smartmontools.sourceforge.net/

=== START OF READ SMART DATA SECTION ===
SMART Attributes Data Structure revision number: 16
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate     0x002f   200   200   051    Pre-fail  Always       -       0
  3 Spin_Up_Time            0x0027   166   166   021    Pre-fail  Always       -       4683
  4 Start_Stop_Count        0x0032   100   100   000    Old_age   Always       -       18
  5 Reallocated_Sector_Ct   0x0033   200   200   140    Pre-fail  Always       -       0
  7 Seek_Error_Rate         0x002e   100   253   000    Old_age   Always       -       0
  9 Power_On_Hours          0x0032   100   100   000    Old_age   Always       -       105
 10 Spin_Retry_Count        0x0032   100   253   000    Old_age   Always       -       0
 11 Calibration_Retry_Count 0x0032   100   253   000    Old_age   Always       -       0
 12 Power_Cycle_Count       0x0032   100   100   000    Old_age   Always       -       16
192 Power-Off_Retract_Count 0x0032   200   200   000    Old_age   Always       -       12
193 Load_Cycle_Count        0x0032   200   200   000    Old_age   Always       -       18
194 Temperature_Celsius     0x0022   104   101   000    Old_age   Always       -       43
196 Reallocated_Event_Count 0x0032   200   200   000    Old_age   Always       -       0
197 Current_Pending_Sector  0x0032   200   200   000    Old_age   Always       -       0
198 Offline_Uncorrectable   0x0030   100   253   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count    0x0032   200   200   000    Old_age   Always       -       0
200 Multi_Zone_Error_Rate   0x0008   100   253   000    Old_age   Offline      -       0

SMART Self-test log structure revision number 1
No self-tests have been logged.  [To run self-tests, use: smartctl -t]


smartctl version 5.38 [i686-pc-linux-gnu] Copyright (C) 2002-8 Bruce Allen
Home page is http://smartmontools.sourceforge.net/

=== START OF READ SMART DATA SECTION ===
SMART Attributes Data Structure revision number: 16
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate     0x002f   200   200   051    Pre-fail  Always       -       0
  3 Spin_Up_Time            0x0027   166   166   021    Pre-fail  Always       -       4675
  4 Start_Stop_Count        0x0032   100   100   000    Old_age   Always       -       18
  5 Reallocated_Sector_Ct   0x0033   200   200   140    Pre-fail  Always       -       0
  7 Seek_Error_Rate         0x002e   100   253   000    Old_age   Always       -       0
  9 Power_On_Hours          0x0032   100   100   000    Old_age   Always       -       105
 10 Spin_Retry_Count        0x0032   100   253   000    Old_age   Always       -       0
 11 Calibration_Retry_Count 0x0032   100   253   000    Old_age   Always       -       0
 12 Power_Cycle_Count       0x0032   100   100   000    Old_age   Always       -       16
192 Power-Off_Retract_Count 0x0032   200   200   000    Old_age   Always       -       12
193 Load_Cycle_Count        0x0032   200   200   000    Old_age   Always       -       18
194 Temperature_Celsius     0x0022   106   103   000    Old_age   Always       -       41
196 Reallocated_Event_Count 0x0032   200   200   000    Old_age   Always       -       0
197 Current_Pending_Sector  0x0032   200   200   000    Old_age   Always       -       0
198 Offline_Uncorrectable   0x0030   100   253   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count    0x0032   200   200   000    Old_age   Always       -       0
200 Multi_Zone_Error_Rate   0x0008   100   253   000    Old_age   Offline      -       0

SMART Self-test log structure revision number 1
No self-tests have been logged.  [To run self-tests, use: smartctl -t]
I teraz pytanie do konfiguracji tegoż programu. Wystarczy jak w pliku .conf będzie tak?

Kod: Zaznacz cały

/dev/sda -H -C 0 -U 0 -m [EMAIL="admin@example.com"]admin@example.com[/EMAIL]
/dev/sdb -H -C 0 -U 0 -m [EMAIL="admin@example.com"]admin@example.com[/EMAIL]
/dev/sdc -H -C 0 -U 0 -m [EMAIL="admin@example.com"]admin@example.com[/EMAIL]
/dev/sdd -H -C 0 -U 0 -m [EMAIL="admin@example.com"]admin@example.com[/EMAIL]
Czy może trzeba skonfigurować do tego jakiś program pocztowy, czy coś?

EDIT: no dobra poczytałem, skonfigurowałem postfixa tak ze emaile są wysyłane na jedno z kont lokalnych, ale nie mam pojęcia jak zrobić żeby email docierał do zewnętrznego serwera, tzn jak proboje wysłać z postfixa to nie dochodzi, więc wprowadzenie tych lini w smartd.conf spowoduje tylko tyle ze tych emaili nie bedę miał nawet na koncie lokalnym...

: 16 sierpnia 2010, 10:18
autor: lun
RAID 5 oferuje większą prędkość odczytu niż lustrzany (ang. mirroring) ale przy jego zastosowaniu nieznacznie spada prędkość zapisu.
Wady:
  • zmniejszona szybkość zapisu z powodu konieczności kalkulowania sum kontrolnych (eliminowana poprzez zastosowanie sprzętowego kontrolera RAID5)
Advantages

Read data transactions are very fast while write data transaction are somewhat slower (due to the parity that has to be calculated).
Może to rozwieje jakieś wątpliwości.

Testując swoją macierz (również w RAID 5), otrzymałem podczas zapisu takie wyniki
[INDENT]/dev/sda ~ 38 MB/sec
/dev/md0 ~ 12 MB/sec[/INDENT]

Edycja:
Spróbowałem z ciekawości zrobić realny test, robiłem obraz (poprzez dd) jednej partycji i zapisałem ją na macierzy, drugi taki sam obraz zapisałem na fizycznym innym dysku. Różnice nie były już tak duże jak w przypadku testu.
Wynik:
[INDENT]dysk ~ 8.1 MB/sec
macierz ~ 6.6 MB/sec[/INDENT]

: 16 sierpnia 2010, 10:58
autor: cooleq
Owszem praktycznie to tłumaczy mój problem, z tym że myślałem, że jeśli jest wolniejszy to faktycznie od RAID-a lustrzanego a nie od pojedynczego dysku.
W każdym razie dzięki więcej tym się zajmować nie będę, teraz próbuję skonfigurować tego postfixa. Niby tylko miał to być serwer plików a tyle roboty.

: 16 sierpnia 2010, 14:34
autor: Pacek
Zapis zawsze jest wolniejszy od odczytu w RAID-5. Tylko problem tego posta polega na tym, że nie wiadomo jaki jest transfer pojedynczego dysku. Transfer na poziomie 10-13MB/s szału nie robi. Jednak aby móc się dowiedzieć więcej czy tak powinno być trzeba by było zrobić test jednego dysku z tej macierzy. Jeżeli macierz jest zrobiona na debianie przez mdadm, to przecież każdy z tych dysków jest też widoczny jako osobne urządzenie w systemie operacyjnym. Można wtedy na takim dysku spróbować zrobić test narzędziem hdparm i dowiedzieć się jakie ma transfery. Ponadto jeszcze jedno pytanie: A kopiowanie pliku jak robiłeś:
- w obrębie tej samej macierzy?
- z macierzy na inny fizyczny dysk?

: 16 sierpnia 2010, 17:38
autor: cooleq
Prędkość zapisu(jednego dużego pliku) wynosi 10MB/s odczytu ok 13MB/s natomiast kopiowania w ramach macierzy ledwie 5MB/s.
Pierwszy test był robiony przez sieć z innego komputera przy pomocy totalcmd.
Owszem jest widoczny ale nie wiedziałem czy jak jest w macierzy to czegoś nie popsuje, a już są tam dość istotne dane, ale skoro tak mówisz to jutro z rana sprawdzę prędkość.

: 17 sierpnia 2010, 00:19
autor: timor
A czy dałeś czas RAID'owi aby się zbudował? W czasie budowy zapis/odczyt jest drastycznie niższy - podobnie jak w przypadku uszkodzenia macierzy.