aha, sokat fejlodott nagyon szerintem a Spectrum Scale 4.x mar a GPFS 3.x-hez kepest. es nem csak azert, mert mas a neve :)
a legnagyobb szivas az volt, hogy nem ismerte fel a /dev/nvme* eszkozoket, ehhez egy "user exit" device discovery scriptet kellett irni, es GPFS-noob vagyok, ezt kinyomozni eltartott egy ideig :-)
(mmlsnds -mben a device az "-" volt a konkret eszkoz helyett, es igy fst sem tudott letrehozni a deploy script). de megoldottam.
kivancsi leszek hogy fog 10 gepen menni, az 200Gbit savszelesseg.
holnap betelepitek nem-flash szervereket (8TB HGST diszkek), megnezzuk ott hogy hasit, ha jol, akkor bye-bye Ceph valoszinuleg.