Sziasztok!
Érdeklődnék, hogy van-e valakinek jó módszere komplett weboldal mentésére? A lényeg, hogy van egy előfizetéses oldal amihez rengeteg tartalom tartozik (hivatkozások az oldalon belül, beágyazott videók, hanganyagok, stb.). Ezt szeretném valamilyen offline formába lementeni, hogy később is hozzáférhető legyen otthonról a tartalma. Bevallom nem vagyok túl "profi" a témában, de ha van valakinek erre működő megoldása akár 1-2 linux parancs vagy script formájában, azt megköszönném.
- 2087 megtekintés
Hozzászólások
Régen még léteztek ilyen crawler-ek, amik végignyalták a linkeket és lementették statikusan az összes oldalt. De a mai interaktív, JS-el, AJAX-al, embedded tartalmakkal, mifenével teletűzdelt világban, pláne authentikált weboldalról - kb. 5 kilences valószínűséggel kizártnak tartom.
"Probléma esetén nyomják meg a piros gombot és nyugodjanak békében!"
- A hozzászóláshoz be kell jelentkezni
nem beszélve arról, hogy nagyon valószínű, hogy ezzel megszeged a szolgáltatás használati feltételeit is...
ami persze nem technikai akadály, csak... lopás.
- A hozzászóláshoz be kell jelentkezni
Nem, nem tűnik el az eredeti helyéről, csak lesz egy példány a vinyón is.:)
Egyébként meg a folyamat így is úgy is ugyanaz...
"Nem akkor van baj amikor nincs baj, hanem amikor van!"
Népi bölcsesség
- A hozzászóláshoz be kell jelentkezni
Nem ugyanaz a folyamat - már csak a célja miatt sem.
- A hozzászóláshoz be kell jelentkezni
Attol függ kinek mi... :)
"Nem akkor van baj amikor nincs baj, hanem amikor van!"
Népi bölcsesség
- A hozzászóláshoz be kell jelentkezni
és akkor eljutottunk a szokásos ezeréves dilemmához, h. a szoftverkalózkodás és a lopás közé lehet-e egyenlőségjelet tenni, vagy sem:
https://www.quora.com/How-is-downloading-of-pirated-books-not-stealing
- A hozzászóláshoz be kell jelentkezni
Lehetni lehet (lasd fent), csak nem érdemes.
"Nem akkor van baj amikor nincs baj, hanem amikor van!"
Népi bölcsesség
- A hozzászóláshoz be kell jelentkezni
A böngésző cace-ben is ott van az oldal másolata, és ráadásul az az alapértelmezett, hogy nem törlődik a böngésző bezárásakor, vagy az oldalról elnavigáláskor. Ezzel az erővel az összes böngésző program is lop?
- A hozzászóláshoz be kell jelentkezni
Kivéve ha az "expires" header tiltja (mint általában mindenhol, főleg mióta jellemzően már mindenki https-ezik).
- A hozzászóláshoz be kell jelentkezni
Mondom az a kérdés, hogy mi a tárolás célja? Ha a böngésző működéséhez kell, az egészen más, mint amikor explicit az a cél, hogy a használati jogosultság lejárta után is rendelkezésre álljon a tartalom másolata.
- A hozzászóláshoz be kell jelentkezni
Mindenesetre barhogy csavarjuk, lopasnak nem lopas. :)
"Nem akkor van baj amikor nincs baj, hanem amikor van!"
Népi bölcsesség
- A hozzászóláshoz be kell jelentkezni
Szerzői jog megsértése, illetve jogosulatlan adatkezelés is lehet.
- A hozzászóláshoz be kell jelentkezni
De ha csak nem akarja többször ugyanarra pazarolni a sávszességet? Vagy fél, hogy egyszer csak bezárják a site-ot bármilyen okból? Vagy net kapcsolat hiányában is szeretné elérni?
Egyébként én is tudok ilyen site-ról. A fenntartója sajnos meghalt, a site-ot bezárták, és most a Google archive-on lehet összegyűjteni azt a sok hsznos tudást, amit a létrehozója annak idején önzetlenül közzétett a nagyközönség számára. Kiadhatta volna könyv formában is, akkor bárki elolvashatná.
- A hozzászóláshoz be kell jelentkezni
"egyszer csak bezárják a site-ot bármilyen okból" Az előfizetési szerződés és az ahhoz kapcsolódó, abból eredő jogok addig illetik meg, amíg a szolgáltatás él. Azaz ha a szolgáltatás megszüntetésre kerül (bezárják az oldalt), akkortól a szerződés, ami jogalapot biztosított a tartalomhoz való hozzáférésre, megszűnik. És megszűnik a hozzáférésre vonatkozó joga is.
"net kapcsolat hiányában is szeretné elérni" - Amennyiben az előfizetési szerződés ezt kifejezetten megengedi, akkor igen, de attól még az előfizetés megszüntetése/lejárata után ezeket a másolatokat sem tarthatja meg a legtöbb esetben.
"létrehozója annak idején önzetlenül közzétett a nagyközönség számára" - apró, de lényeges különbség, hogy ez utóbbi nekem úgy tűnik, hogy nem előfizetéses szolgáltatás volt...
- A hozzászóláshoz be kell jelentkezni
Nekem is van ilyen "előfizetésem". Sok százezer forintnyi tananyagot vettem meg, korlátlan időre. Ha bezár a bazár, akkor hol érem el?
Na itt is vimeo, txt copy paste, oldal mentése pdf-be, minden játszik, mert amúgy ki vagy szolgáltatva.
- A hozzászóláshoz be kell jelentkezni
A vettél n tananyagot, és „backupot” csinálsz, az határeset. Ha előfizetés helyett lenyúlod az anyagokat, hogy ne kelljen tovább fizetni a havidíjat, az egyértelmű jogsértés.
- A hozzászóláshoz be kell jelentkezni
"Sok százezer forintnyi tananyagot vettem meg, korlátlan időre. " - a második tagmondat a lényeg: ha valóbankorlátlan időre szól a felhasználási jog, akkor offline mentés szerintem rendben van.
- A hozzászóláshoz be kell jelentkezni
Egy konkret jogi hivatkozast akkor kernenk ide errol az allitasrol.
"Nem akkor van baj amikor nincs baj, hanem amikor van!"
Népi bölcsesség
- A hozzászóláshoz be kell jelentkezni
Lehet itt kocajogaszkodni, de a lopas cselekmenye akkor nem all meg.
"Nem akkor van baj amikor nincs baj, hanem amikor van!"
Népi bölcsesség
- A hozzászóláshoz be kell jelentkezni
Szerzői jog megsértése, illetve jogosulatlan adatkezelés is akár. Az előbbit "lopásnak" (tartalom ellopása) szokta a köznyelv hívni. Az előfizetéssel korlátozott jogot szerzel a tartalom "fogyasztására". Az előfizetés lejártával ez a jogod megszűnik.
- A hozzászóláshoz be kell jelentkezni
Ha valami jogilag nem lopás, akkor nem nevezzük lopásnak, mert máshogy sem lesz az, pont. Lásd még pl a köznyelv szerinti "autólopás" vs. jogilag "jármű önkényes elvétele"-cselekmények...
"Nem akkor van baj amikor nincs baj, hanem amikor van!"
Népi bölcsesség
- A hozzászóláshoz be kell jelentkezni
A "jármű önkényes elvétele" is lopás a köznyelvben, ahogy a szerzői és szomszédos jogok megsértése körébe tartozó dolgok egy részét is "lopás"-nak nevezi a köznyelv.
- A hozzászóláshoz be kell jelentkezni
A koznyelv es a jogi terminus nem ugyanaz, mert maga a cselekmeny sem ugyanaz. A koznyelv szerinti "naplopot" se fogjak soha elitelni lopas folytatolagos cselekmenye miatt...
"Nem akkor van baj amikor nincs baj, hanem amikor van!"
Népi bölcsesség
- A hozzászóláshoz be kell jelentkezni
“Az ellenség keze betette a lábát”
- A hozzászóláshoz be kell jelentkezni
Jah, ez a video is pont a jogvedok 2000's evekbeli, erosen torz, sarkito latasmodjat karikirozza ki.
"Nem akkor van baj amikor nincs baj, hanem amikor van!"
Népi bölcsesség
- A hozzászóláshoz be kell jelentkezni
90-es években még a BSA bilinccsel fenyegetőző plakát is menő volt szerte az országban idehaza
- A hozzászóláshoz be kell jelentkezni
Ka, aztan mi lett abbol is. :)
"Nem akkor van baj amikor nincs baj, hanem amikor van!"
Népi bölcsesség
- A hozzászóláshoz be kell jelentkezni
Oldalfüggő, honnan mit tud elhozni. Ha nem valami full adatbázisból kiszolgált, dinamikus linkekkel működő oldal, azt simán lehozza, csak győzd kivárni.
- A hozzászóláshoz be kell jelentkezni
..és ezt már 20 éve is használtam. Csodálom, hogy még létezik. Jó cucc :)
- A hozzászóláshoz be kell jelentkezni
Csodálnám, ha nem baszták volna szét már ezt is az ágilis módszertan és a transzvesztita nembináris kód-of-konduktos lillárafestetthajú abberáltak.
- A hozzászóláshoz be kell jelentkezni
Azért az biztató e tekintetben, hogy 2003-ban is ugyanígy nézett ki a weboldaluk és még mindig html alapú: http://web.archive.org/web/20031122174059/http://www.httrack.com/
- A hozzászóláshoz be kell jelentkezni
Ez valóban máig a legjobb. Illetve ha csak egy weboldal kell https://getfireshot.com/
“Az ellenség keze betette a lábát”
- A hozzászóláshoz be kell jelentkezni
előfizetést nem lehet meghosszabbítani?
4 és fél éve csak vim-et használok. elsősorban azért, mert még nem jöttem rá, hogy kell kilépni belőle.
- A hozzászóláshoz be kell jelentkezni
Az internet ugy mukodik, hogy amit most latsz, az altalaban 5 ev mulva mar nem lesz meg.
Saying a programming language is good because it works on all platforms is like saying anal sex is good because it works on all genders....
- A hozzászóláshoz be kell jelentkezni
Mármint az ingyenes/olcsó trial időszakot...? :-D
- A hozzászóláshoz be kell jelentkezni
> beágyazott videók,
Es megis hogy vannak beagyazva? youtube? vimeo?
Mert altalaban ki lehet valasztani hogy milyen minosegben mentsd le.
En multkor lementettem egy ilyet, hogy offline tudjam bongeszni tableten is. vimeo videok voltak olyan 480 darab. Ugye a tabletra nem akart felferni, igy ujra is kodoltam. Csinaltam hozza egy kis html oldalt, ami csak css-bol (js nelkul!) tud szurni, egy-egy tagre.
Tableten meg ghostcommanderrel kitettem az asztalra (android), mintha egy alkalmazas lenne. Rakattintasz es fullscreen bejon egy videotar, amiben lehet tapicskolva szurni.
A mostani oldalakat nem erdemes egy-az-egyben lementeni, mert mar az eredetit is altalaban ugy ganyoltak ossze valami wordpress plugin hegyekbol. Egyszerubb ujrakrealni egy jol olvashato html-t benne css-sel.
Megnezed milyen ajax kerest kuld, es akkor curl-lal vagy wget-tel lemented. Van a web developernel ugy, hogy komplett url kimasolasa hitelesitessel curl parancsba, vagy valami ilyesmi.
Saying a programming language is good because it works on all platforms is like saying anal sex is good because it works on all genders....
- A hozzászóláshoz be kell jelentkezni
Itt volt erről szó nemrégen:
https://hup.hu/node/176586
(röviden: próbáld ki a browsertrix-crawlert https://github.com/webrecorder/browsertrix-crawler docker -ben futtatva tényleg csak néhány parancs...)
- A hozzászóláshoz be kell jelentkezni
https://superuser.com/questions/514782/how-to-mirror-a-website-on-linux
Van még a w3mir is : https://metacpan.org/dist/w3mir/view/w3mir.PL
- A hozzászóláshoz be kell jelentkezni
wget -rbmck https://hup.hu :-)
- A hozzászóláshoz be kell jelentkezni
wget https://*.*
- A hozzászóláshoz be kell jelentkezni
Kihagytad a -r
kapcsolot :)
- A hozzászóláshoz be kell jelentkezni
wget -r --porn https://*.*
2 floppyra kifér.
- A hozzászóláshoz be kell jelentkezni
Archivebox. Nekem eddig nagyon bejött. Selfhosted, opensource. Firefox-hoz van plugin, ha be van konfigolva, utána csak egy jobb gomb az éppen böngészett és menteni kívánt oldalon, és már lehet is a saját archívumba küldeni.
- A hozzászóláshoz be kell jelentkezni
- A hozzászóláshoz be kell jelentkezni