"Az a tapasztalat vele, hogy abszolut nem lehet tudni, hogy mi van replikálva, és mi nem."
Erről tud a RHEL support is? Emlékeim szerint pont azért lassú és körülményes az írás, mert megvárja a replikákat és distributed lock-ot használ. Ettől persze el lehet térni, hogy gyorsabb legyen, de akkor nem kell azért panaszkodni, hogy néhol nem konzisztens.
"A másik meg, hogy mmap és lock sem nagyon működik rajta, amiket a cyrus is, és a dovecot is szereti, ha van."
Dovecot esetén az mmap letiltható, a distributed lock pedig van GlusterFS-hez.
Én pár éve végeztem teszteket elosztott Postfix-Dovecot-OpenLDAP konfiggal GlusterFS alapokon, nem vettem észre különösebb problémákat, simán lábonlőhettem bármelyik node-ot terhelés alatt és ment tovább. De YMMV, ha nem, hát nem.