[HPC2009] userdisk upgrade

Röviden: a userdisk 3TB -> 9TB
másképp nézve: 380 MB/s -> 60 MB/s

A 3T userdiszket kinöttük. Szerencsére használják, sajnos kicsi volt a userdiszk. 2009 -ben nem lett bele tervezve új tervezve, a 2010-es tervet meg kihúzták.

A régi egy telivér midrange storage (IBM DS4800, 28 FC diszk), az új egy olyan olcsófajta (LSI megaraid 8880EM2 kártya + 12 SATA diszk).

Azt hiszem, az ilyen kártyákra szokta az úri közönség azt mondani, hogy "enterprise" meg hogy "comprehensive" meg hogy "igazi, szerverbe való, erõs hw raid" Van benne 512 Mbyte ram, és akksi, ami védi.

Hát, itt ez az abszolult minimum, amivel hajlandó vagyok foglalkozni.

De, most mondd meg, ha (egyábként gyártó által nem támogatva) egy szimpla raid nélküli SAS HBA-val fogom meg ugyanezt a 12 diszket, akkor mérek 900 MByte/sec szekvenciális olvasást és 400 Mbyte/sec írást, ezzel meg miért 600 Mbyte/sec olvasás, és 60 Mbyte/sec írás? A kártyán lévõ kicsiny kis passzív hûtõbordás chip nagyon könnyen elvérzik a végtelen XOR mûveletekben.

Két napos leállással szereltem be, próbálgattam többféle RAID50 kialakítást.

Hozzászólások

A hosszu (masfel nap...) allas alatt az egyik szamolo node egyik memoriaja elpukkant.

ez mar a masodik ilyen eset 1 ev alatt. (264 darab modul van osszesen a rendszerben)

Megnezzuk jovoheten, tenyleg next-business-day a HW javitas hozza, vagy sem. Csodalkoznek, ha flottul menne, a HP garis adatbazisa eleg vacak tud lenni

hat, ha meg azt is hozzavesszuk, hogy minden rebootnal (most is) random az egyik node egy modullal kevesebbel jon fel, aztan par reboot hatasara meglatja a modult. Most is volt ilyen. Olyan 4-5 hibas modult tippelek, amik elobb-utobb teljesen feldobjak a pacskert.
ECC nem jelez hibat, memtest+ nem jelez hibat. Egyszeruen bootkor kiesik a modul az ismertek kozul.

azt a 900 gigás olvasást szerintem elírtad...

persze ;)

javitva, koszonom.

16 darab SATA diszkkel ertem el az 1GB/s erteket, szigoruan linux sw raid. semmi mas megkozelitoleg sem volt ennyire gyors. a 12 diszkre tippelem a 900 MB/s erteket.

az atlasz fejgep 10g ethernete olyan 7g valos teljesitmenyt tud (ennyit mertem). Tervem van egy olyan jol kiegyensulyozott linux+lustre storage megoldasra, ahol a lustre node-ok kitoljak a 7g forgalmat az etherneten valoban.