Konwersja Raid1 do Raid5

ODPOWIEDZ
R70
Uczeń Mistrza
Posty: 661
Rejestracja: pn gru 18, 2017 12:53 am

Konwersja Raid1 do Raid5

Post autor: R70 »

Jako że dotarły do mnie reklamowane 2 dyski exos x16 16TB po testach (chyba są wreszcie ok :) ) a nigdy nie testowałem "czasowych aspektów" tak dużych dysków, zdecydowałem się na sprawdzenie np. jak długo będzie trwała konwersja z R1 do R5, korzystające z DS1821+ z 4GB RAM. Przyznam że czas potrzebny całkowicie przerósł moje oczekiwania ;) Jako że na R1 było tylko niespełna 300GB założyłem że całość zmieści się w max 24h. Tymczasem niestety... Po 25h wykonane jest 23% konwersji... Szacuję że 5dób może nie starczyć (dyski będą zwalniać, na razie dyski z R1 osiągają 90-150MB/s ). Warto dodać że serwer jest w 100% nie używany więcw normalnych, produkcyjnych warunkach zapewne trwałoby to dłużej.
Jak skończy to sprawdzę jak długo potrwa odbudowa zdegradowanego R5 3x16TB - ciekawi mnie czy ograniczeniem będzie procesor, czy szybkość dysku ? Liczę że limitem będzie tylko szybkość zapisu dysku - więc powinno być znacznie sprawniej. A może ktoś ma jakieś doświadczenia z odbudowy R5 na innych modelach ? Procesor pracuje na 100% a dysk jeszcze może, czy odwrotnie ?
Pozdrawiam,
Paweł
DS1819+, 32GB ECC, 10GbE, DX517 DS916+ 8GB, DX513, DS710+, DX213, DS119j, DS120j
RT2600ac + RT2200ac
Awatar użytkownika
michau
Wyrocznia
Posty: 1172
Rejestracja: pt gru 18, 2015 12:03 pm
Lokalizacja: Mińsk Mazowiecki

Re: Konwersja Raid1 do Raid5

Post autor: michau »

U mnie przy odbudowie RAID 5 na 5x WD Red WD60EFRX:
procesor max 20%
dysk w okolicy 250 MB/s odczytu i ok 65 MB/s zapisu
NAS:
[ MASTER ] Synology DS1515+ | 16 GB RAM | DSM 7 | 5 x WD Red WD60EFRX Btrfs RAID 5
Przemuss
Godfather
Posty: 1303
Rejestracja: wt gru 15, 2015 12:19 pm
Lokalizacja: Żyrardów

Re: Konwersja Raid1 do Raid5

Post autor: Przemuss »

Sprawdź co masz ustawione w zarządzanie przechowywaniem - pula pamięci - konfiguracje
Zapewne masz tam ustawiony tryb domyślny. Ustaw sobie wysoki lub też dostosuj prędkość.

Wysłane z mojego MAR-LX1A przy użyciu Tapatalka

Administratorzy dzielą się na tych, którzy robią kopie zapasowe i tych, którzy będą je robili.

Serwery NAS:
Synology DS211j, DS1511+, RS2212RP+ DS1513+

"Zasłanianie się dysleksją, to jak chwalenie się małym fiu...."- by Pati
gg 2101676
R70
Uczeń Mistrza
Posty: 661
Rejestracja: pn gru 18, 2017 12:53 am

Re: Konwersja Raid1 do Raid5

Post autor: R70 »

michau pisze: pn mar 15, 2021 8:51 pm U mnie przy odbudowie RAID 5 na 5x WD Red WD60EFRX:
procesor max 20%
dysk w okolicy 250 MB/s odczytu i ok 65 MB/s zapisu
To mnie zaskoczyło - podejrzewałem że przy R5/6 jeśli procesor nie będzie ograniczeniem, to będzie limitować odbudowę szybkość odbudowy będzie prędkość zapisu na nowym dysku. Tymczasem zgodnie z tym co napisałeś szybkość zapisu była daleka od max dysku pomimo tego że procek był też ledwo co wykorzystany.

Edit 17.03.2021
Właśnie sobie uświadomiłem że Atom C2538 jest 4wątkowy więc a z tego co wiem raid programowy korzysta 1 rdzenia, więc 20% wykorzystania procesora to 80% wydajności jednego rdzenia. Czyli procek "szalał" z niemal max prędkością i on pewnie ograniczał szybkość zapisu odbudowy.
Przemuss pisze: wt mar 16, 2021 10:00 am Sprawdź co masz ustawione w zarządzanie przechowywaniem - pula pamięci - konfiguracje
Zapewne masz tam ustawiony tryb domyślny. Ustaw sobie wysoki lub też dostosuj prędkość.

Wysłane z mojego MAR-LX1A przy użyciu Tapatalka
Mam ustawione środkową opcję - czyli max prędkość odbudowy. Dysk które był w Raid1 są obciążone w 70-95% (z udziałem R70/W30 czyli wydaje się że to one limitują szybkość odbudowy. Po prostu osiągają swój szczyt obciążenia mieszanego odczyt/zapis na poziomie 90-150MB/s. Dysk który został dodany jest wykorzystywany w 7-11% z zapisem na poziomie 15-50MB/s.
Ostatnio zmieniony śr mar 17, 2021 2:08 pm przez R70, łącznie zmieniany 1 raz.
Pozdrawiam,
Paweł
DS1819+, 32GB ECC, 10GbE, DX517 DS916+ 8GB, DX513, DS710+, DX213, DS119j, DS120j
RT2600ac + RT2200ac
Awatar użytkownika
mikhnal
Darth Vader
Posty: 2728
Rejestracja: pt gru 11, 2015 8:55 am
Lokalizacja: Warszawa

Re: Konwersja Raid1 do Raid5

Post autor: mikhnal »

Ciekawą opcją przyspieszającą odbudowę jest włączenie bitmapy z tego artykułu:
http://notatnik.mekk.waw.pl/archives/29 ... rashu.html
DS3018xs
DSM 7.2.1-69057 Update 4
32GB RAM 2x KSM24SED8/16ME DDR4 2400 CL17 ECC mod
6x 10TB WD Red WD100EFAX RAID5 btrfs
2x SNV3500-400G read/write SSD cache @ E10M20-T1 + 10GbE LAN
2x Noctua NF-A9 fan mod
RT6600ax + WRX560
SRM 1.3.1-9346 Update 9
R70
Uczeń Mistrza
Posty: 661
Rejestracja: pn gru 18, 2017 12:53 am

Re: Konwersja Raid1 do Raid5

Post autor: R70 »

mikhnal pisze: wt mar 16, 2021 12:13 pm Ciekawą opcją przyspieszającą odbudowę jest włączenie bitmapy z tego artykułu:
http://notatnik.mekk.waw.pl/archives/29 ... rashu.html
Dzięki :) warte przemyślenia i przetestowania na laborce. Z drugiej strony, jeden z komentarzy odnosi się do innych wypowiedzi; https://blog.ganneff.de/2008/01/write-i ... idere.html które sugerują że obciążenie I/O bywa okrutne przy korzystaniu z map.
Pozdrawiam,
Paweł
DS1819+, 32GB ECC, 10GbE, DX517 DS916+ 8GB, DX513, DS710+, DX213, DS119j, DS120j
RT2600ac + RT2200ac
ODPOWIEDZ