backup és adatbiztonság

Fórumok

Tudtok-e olyan backup szoftvert, ami felhőbe ment (Azure>S3>*), és külön figyel adatbiztonságra? Például a felhős tárhelyeken alapból tárolnak valami hasht, időnként le lehetne kérni az összes mentett fájl hashét és leellenőrizni, hogy a helyi fájlok nem sérültek-e. Vagy meg tudom adni, hogy ha pl. azt látja, hogy egy JPG fájl változott, akkor nem menti, hanem szól nekem, hogy gáz van (mert én tudom, hogy sosem változhat meg). Vagy ha mégis kiderül egy fájlról, hogy korrupt lett, de már mentve lett, arra az esetre legyen a távoli helyen egy snapshot, ezt is tudni szokták a felhőben. Sőt, alapból konzisztencia ellenőrzést végez fájlokon: megpróbálja dekódolni a JPG-t, checksumot néz a tömörített fájlokra (akár még .docx-re is).

Az igazán fontos dolgaimról legalább 2 helyen van backup, de azon agyalok mostanában, hogy még ez sem véd mindentől. Az ugyebár egy alap ismert probléma, hogy hiába a mentés, ha a korrupt fájlt visszavonhatatlanul rámentem. RAID tükör sem segít, ha az egyik lábán hazudik a diszk, nem fogom tudni, hogy melyik hazudik (és szerintem még azt se veszem észre, hogy egyáltalán hiba van, mert se HW, se SW nem fogja mindkét lábról olvasni ugyanazt a blokkot és hasonlítgatni). PCIe buszon van CRC, ez oké. RAM-ból van ECC-s, de ez laptopon még nem igazán játszik. Tehát ha nagyon peches vagyok, elég sok helyen sérülhet az adat.

Hozzászólások

Az első bekezdéshez nem tudok szólni, de...
a ha az egyik lábán hazudik a diszk, nem fogom tudni, hogy melyik hazudik (és szerintem még azt se veszem észre, hogy egyáltalán hiba van, mert se HW, se SW nem fogja mindkét lábról olvasni ugyanazt a blokkot és hasonlítgatni) -hez:
a ZFS igen!
Mostmár elérhető pár OS-re (kivéve Kindows), én Solaris x86 alatt tudok nyilatkozni róla: volt egy elromlott memóriakontrollerünk egy alaplapon, ami kb 3-4 hónapig szórta a hibákat. A zfs szépen mindig szólt, hogy van checksum error. Nyomtam egy cleart (nagyon kevés volt, volt, hogy hetente 0, néha 1-2 (*), de akkumulálódtak), rendben levőnek tűnt minden. Majd egyszer szólt, hogy nagyobb a gáz. Némi tesztelés után kiderült az alaplap hiba, cseréltük. A 3 diszken (3-way mirror volt), összesen egy, lényegtelen fájl veszett el, szépen mindent visszaszinkronizált, mindig a jó replikát. (~400GB adatról van szó)
Ugyanis a zfs checksumolgat, elég vastagon, ha jól tudom, már a kiírás előtt, a memóriában. De ezt tőlem hozzáértőbbek majd megmondják.
Sőt, tudsz több copy/diszk opciót beállítani (copies), max értéke 3, azaz egy lemezen 3 példányban lesz meg az adat, így is nyersz kis biztonságot. Meg persze vesztesz sok sebességet...
Nem reklám, de ha ennyire paranoiás vagy, segíthet, ha érdekel, nézz utána.

(*) már tudom, hogy ez sok :)
<-------
You can't grep on dead trees.

Tudtok-e olyan backup szoftvert, ami felhőbe ment (Azure>S3>*), és külön figyel adatbiztonságra?

Alapvetően szerintem mind figyel, és rendszeresen ellenőrzik az adataik épségét. A dolgot én úgy oldottam meg, hogy minden (érintett) fájlról csinálok egy MD5 hash-t amikor felkerül a rendszerbe, és időnként ellenőrzöm, hogy van-e eltérés. Nyomor esetén vissza lehet állítani a mentésből. Mentésre én a CrashPlan-t használom, és:

http://support.code42.com/CrashPlan/Latest/Configuring/Specifying_Versi…

"Subscribers of CrashPlan for Home have the option to change the default version settings, which includes the ability to keep all versions of all files forever."

"mert se HW, se SW nem fogja mindkét lábról olvasni ugyanazt a blokkot és hasonlítgatni"

De :) V.ö.: checkarray, debian, ill: https://raid.wiki.kernel.org/index.php/RAID_Administration

Viszont ezek a dolgok már inkább archiválási, mint mentési kérdések.