Adott egy környezet, ahol a mentést backuppc végzi. A mentés jelenleg vegyesen áll sok-sok apró, valamint kevés, de viszonylag nagy fájlokból, illetve a backuppc linkjeiből. A teljes mentési adat kb. tízmillió fájl (6T), ami 90%-ban hardlink. A mentett gépek egy része gigabiten lóg a közelben, egy másik része (szerencsére csak három masina) szerteszét van a világban, változatos sávszélességgel és késleltetéssel.
Szeretném a mentett adatot offsite is tárolni (Backblaze, Amazon, stb.). Az általam lelt megoldásokkal az a baj, hogy gyakorlatilag minden alkalommal végignézik a teljes adatmennyiséget, ami a jelen esetben kissé időigényes. A masina viszonylag régi telepítés, történelmi okokból reiserfs van a mentések alatt.
A következőket tudom elképzelni:
- Fájlrendszer csere (lassan elfogyott a hely, nemsokára érkeznek új diskek, akkor meg tudnám lépni), olyanra, ami jól tűri a pármilliónyi hardlinket. A zfs pl. hogy teljesít ilyenkor, van tapasztalat?
- Lecserélem a backuppc-t egy másik cuccra, ami lekezeli a mentések offsite szinkronizálását, de mire?
- Blokkszintű replikáció (mint pl. a drbd), bár ez esetben a visszaállítás kissé vontatott lehet, nomeg nem is erre való, és igazándiból nem is jó megoldás.
Jó lenne olyan megoldás, ami nem csak egyféle felhős, offsite megoldást támogat (azaz ha pl. át akarok állni Glacierre a Backblaze-ről, akkor az viszonylag problémamentesen megoldható legyen).
Persze a jelenlegi előnyök (delta transfer, dedup, tömörítés, pull) megtartása mellett. A titkosítás egy új igény, az offsite tárolt adatokat titkosítani kéne (ez gondolom viszonylag alapfunkció). Az se baj, ha nem kell a kliensekre valami csodadémon.
Kinek mivel van tapasztalata?
- 2646 megtekintés
Hozzászólások
Ezen en is gondolkodtam mar.
ZFS kezenfekvonek tunhet. Nem tudom, hogy gondolod az offsite mentest. Ha az offsite mentes mindig full akkor lehet, hogy eleg egy LVM snapshotot csinalni az LV-rol amire a backupok mennek es azt attolni a remote tarhelyre.
Masik megoldasnak az Amanda jo lehet. Az tud S3-at tape drive-kent hasznalni.
- A hozzászóláshoz be kell jelentkezni
Én Glacier-be tolom a tömörített és titkosított ZFS snapshotjaimat.
------------------------
{0} ok boto
boto ?
- A hozzászóláshoz be kell jelentkezni
+1
Van olyan lehetőség is, hogy először az S3-ba küldöd, ahol a bucketen belül beállítasz egy policyt, ami X nap után átmozgatja a Glacierbe.
- A hozzászóláshoz be kell jelentkezni
Nem hülyeség :)
------------------------
{0} ok boto
boto ?
- A hozzászóláshoz be kell jelentkezni
Használ valaki ZFS-t úgy, hogy van kb 20 000 000 fájl, ami 80%-ban akár hússzoros (néha bőven több) hardlink? Nem attól tartok hogy nem működik, csak érdekel, hogy mennyire hatékonyan.
- A hozzászóláshoz be kell jelentkezni
Backuppct nagy megelégedéssel én is használok egy kisebb környezethez, igazából teszi a dolgát, nem kell vele különösebben foglalkozni.
A kérdés viszont engem is érdekelne, mi a leghatékonyabb, ha több felé kell replikálni a mentést.
-----
“Firefox, you say? No I don't play Pokémon”
- A hozzászóláshoz be kell jelentkezni
Itt Urbackup van BTRFS-el, ez is megy (bár ha még vannak XP-s gépek akkor a 2.x felejtős)
- A hozzászóláshoz be kell jelentkezni