Zamrzání PC při zátěži HDD

[petr2012h]

Dobrý den prosím o tip, jak postupovat s řešením problému. Jsem úplně bezradný. Řeším to již několikátý den a bohužel nejsem úspěšný.

Postavil jsem server s OS Windows 2008 R2 CZ, který má připojených 20x HDD S-ATA. Při práci s některými z nich vždy dojde k "zamrznutí" systému. Počítač je postaven na MB Intel DZ68BC, 3x externím řadiči SATA disků AXAGO PCIS-60 v PCI slotu a 20 disků Seagate a WD různých kapacit. Z disků jsou vytvořena softwarově RAID 5 pole (Windows), kterým jsou přiřazena písmena O, P, Q a R. Pole O složené z 5x HDD WD 2,5 TB je úplně v pohodě (připojeno k integrovanému řadiči na MB). Pole P a Q jsou z disků 5x 2TB a R z disků 4x 1,5 TB. Když kopíruji z nebo na pole P, Q nebo R, vždy po chvíli dojde k "zamrznutí" počítače, který nereaguje na nic i obraz zamrzne a lze pouze resetovat. Kopíruji-li na nich data mezi sebou, např. z P na Q, dojde k zamrznutí okamžitě. Naproti tomu po pádu systému se vždy RAID pole synchronizuje, což trvá cca 2 dny. Při této synchronizaci však počítač "nezamrzá", ačkoliv běží všechny HDD. V systémovém logu po pádu je pouze: "Ovladač PCI vrátil neplatné číslo ID pro podřízené zařízení (FFFFFFFFFFFFFFFF00)."

Také se začalo nyní stávat, že počítač nenabutuje. (Nevím zda to s tím souvisí). Při startu obrazovka zčerná, pak jede proužek se zelenými čárkami, je slyšet jak si osahává disky, pak opět obrazovka zčerná a již se nic neděje... Např. na pátý pokus nastartuje.

Ještě mě trochu zaráží, že ve Windowsím správci disků je bootovací disk C někdy uveden jako disk 2 (tedy třetí v pořadí) a někdy jako disk 4 (pátý v pořadí). Tedy, že se to mění ačkoliv se na pořítači disky nepřidávají ani "nepřepojují".

Zatím zvažuji dvě hypotézy:
1) při zatížení pole při kopírování dojde nárazově většímu proudovému odběru a jak je napájení napojeno přes několik MOLEX konektorů, dojde na konci k poklesu napájení disků pod kritickou hranici a k zamrznutí. (Zkoušel jsem měřit, napájení je 4,6-4,8 V a cca 12,3 V).
2) disky polí P, Q a R jsou připojeny přes řadiče AXAGO, zatímco O je naintegrovaném řadiči MB. Uvažuji o problému mezi řadičem AXAGO a MB.

Děkuji za radu
Petr

[kubat76]

střelím od boku. Co se stane když se nastaví ve správci zařízení - diskové jednotky - vlastnosti - zásady - povolit ukladání do mezipaměti disku ?
Podobně se mi choval jeden server. Při ukladání ze síťe na disk při velkém souboru zamrznul tak na 2-3 minuty a soubor se neuložil korekně. Ale jednalo se o win2003 a PATA řadič bez RAID. Při čtení z disku bylo všechno OK. Tohle mi pomohlo....
Ale je možné že je problém mezi deskou a těma řadičema.

[Milanr1]

Nepochlubil ses typem zdroje ani zda jsi otestoval jeho stav.
IMHO sis odpověděl sám (jen to možná netušíš):

20 disků Seagate a WD různých kapacit

Takovou ptákovinu snad někdo vymyslel hlavou!?
Co s tím?
1) Vyházej nekompatibilní HDD.
2) Otestuj stav všech zbývajících HDD.
3) Osaď PCI řadiče pomocí HDD jednoho výrobce, optimálně totožné kapacity (max. do 2 TB).
4) Zauvažuj o přechodu na moderní externí řadič. PCI sběrnice je v tomto tisíciletí už dávno morálně mrtvá.

[petr2012h]

Zdroj jsem testoval. Nejprve tam byl zdroj od fortronů 550W, který jsem vyměnil za stejný kus stejné watáže, který jsem zkušebně vyměnil za Nexus 400 W. Myslím si, že zdroj 550W by to měl utáhnout.

[Milanr1]

To si snad děláš PR-Dell, ne?!
Pod 1000 W v serveru bych rozhodně nešel!

[soban]

550W zdroj pro 20 disků?????

A díval jsi se jaký může být odběr z jednotlivých větví zdroje na 5V a 12V větvi a spočítal jsi si odběr všech disků + MB, CPU.....

I když bude nastaveno různé úsporné stavy pro HDD a pod tak při zapnutí ten zdroj musí dodat maximální proud pro roztočení všech disků najednou a to je pěkná špička pro 20 kousků.....

Takže tipuji zdroj a jako druhé externí řadiče do PCI sběrnice které nestíhají.

Takže to chce kvalitnější zdroj a možná lepší sata řadiče možná by stálo za to s HW raidem.

[petr2012h]

Nemohu v toto chvíli zdroj vyloučit, ale: při startu kdy je největší zátěž to utáhne i ten zdroj 400W a UPS, která je 400W nehlásí přetížení. Když vše naběhne a např. probíhá resynchronizace všech disků (disky z řady Green), UPS hlásí příkon mezi 200-204W. Po dokončení resybchronizace, když všechny disky až na systémový povypínám, příkon dle UPS klesne na 75W. V tuto chvíli když roztočím jeden z RAIDů písmena P, Q nebo R a začnu na něj zapisovat, během několika vteřin se to "kousne". Přijde mi, že v té době je příkon kolem 100W protože ostatní disky stojí a tedy zdroj s tím nemá moc práce. Ale není nic jednodušší odpojit několik disků fyzicky od napájení a vyzkoušet to...

[Milanr1]

To už si z náš ale fakt děláš šoufky:

disky z řady Green

v žádném případě nepatří do RAIDu!
Kdo mohl postavit tak už v základu nesmyslnou hw konfiguraci serveru?
Nejedná se o nějakou samo-domo slátaninu?

při startu kdy je největší zátěž to utáhne i ten zdroj 400W

Zdroj musí mít min. 50 % rezervy oproti max. loadu.
Dtto platí pro UPS:

UPS, která je 400W nehlásí přetížení

[soban]

Prostě dělá si z nás šoufky - server pro 20 s green HDD s 500W zdrojem a s X řadičema do PCI sběrnice, takhle bych si nepostavil server ani doma.

[petr2012h]

Nerozumím co myslíš tím dělá si z nás šoufky. To že to není standardní HW pro takovéto řešení je bez debaty. Firma má však velmi omezené prostředky na HW, který sestavuji již dlouhá léta já a většinou nám to i úspěšně funguje. Kdyby ses juknul na MB, zjistil bys, že je to standardní desktopová deska, která nemí ani suportované ovladeče pro Windows 2008. To nic ale nemění na situaci, že bych to rád zprovoznil. Rád bych přišel na to, proč RAID O je ok a ostatní ne. Doufám, že na to přijdu...

[kejki3]

Laik žasne, odborník se diví.

[soban]

Vždyť ti to říkám proč to blbne:

Poddimenzovaný zdroj a aušusové řadiče na PCI sběrnici které ještě budou určitě zdílet IRQ protože PCI zběrnice má pouze 4 fyzické vodiče IRQ a kdoví co je na nich ještě pověšeno na MB (zjišťovat to nebudu).

Prostě PCI zběrnice při SW raidu nemůže stíhat. A doraženo green disky místo disky pro raid.

[petr2012h]

Tak zdrojem to na 100% není, vyměnil jsem ho za zdroj 800W. Všechny PCI řadiče jsem vyměnil za jiný typ PCI řadiče, které byly k dispozici a to také nepomohlo. Nyní zkusím tedy dle rady se zbavit všech PCI řadičů a vyměnit je za ADAPTEC AAR-1430SA do PCIe, tak uvidíme...

[Petr_S]

No je to opravdu dost velké zoufalost. To, že jsou disky od různých výrobců by dnes už ani nemuselo vadit, ale to, že je 12 disků interně připojeno na jednu sběrnici PCIe x1, které zvládne maximálně 500 MB/s, to je už docela potíž. Kromě toho ty řadiče SiI3124-2 jsou schopné jakž-takž pracovat na sběrnici PCI-X, tedy 64 bitů x 133 MHz = 1066 Mbyte/s, na každý disk zbývá 266 MB/s. Ve sběrnici PCI zbude na jeden disk jen 32 * 33 / 8 / 4 = 33 MB/s. Nehledě na problémy s IRQ a DMA.

Disky mívají při připojení na 12 V odběr okolo 2 A, 20 disků = 40 A, utáhne to ten zdroj?

Jak to chcete vyřešit s tím Adaptecem? Má jen 4 SATA porty a základní deska má jen dva konektory v případě, že se nepoužije PCIe grafika. Násobičem portů?

Přijde mi skoro až obdivuhodné, že to aspoň chvíli funguje, rozhodně bych ale takovému serveru nesvěřil žádná data.

[petr2012h]

Zdroj na 12V má 65A. (Corsair GS800). Dle dokumentace ty Seagate disky při startu mají ve špičce až 2,7A a ty WD 2A na 12V.

MB má PCIe x16 (VGA tam nemám, používám integrovanou), 1xPCIe x8 a 2xPCIe x1, celkem tedy 4xPCIe. Replikátor portů Kouwell 126 není nyní dostupný, takže tam chci dát do třech PCIe slotů 2x toho Adapteca, celkem tedy 8 disků a když to půjde, budu přemýšlet co dále...