Hogy tudok letölteni teljes weboldalt, amihez be kell jelentkezni?
Egy weboldalt szeretnék letölteni, aminek más atratalma akkor, ha be vagyok jelentkezve (és mivel 2-3 gigabájt méretű az oldal, hosszú) lenne egyesével lementeni.
Természetesen van jelszavam, és felhasználónevem.
Több programmal próbálkoztam, de mindegyikkel csak a vendégként megtekinthető oldalt tölti be.
Ha írtok programot, kérnék leírást is hozzá. Köszönöm.
Szerencsére én értem. :) (Munkám során pont crawlerekkel foglalkozom, és pont tegnap írtam egy crawlert iwiwhez, bár ez magánprojekt volt :D)
El kell küldeni a bejelentkezési adatokat POST-ban, a visszajövő válaszból lementeni a cookie-kat (fájlba mondjuk), aztán a honlap letöltésekor pedig felhasználni a cookie-kat.
Ezt pl. WGET-tel meg tudod csinálni.
Cookie mentés és betöltés le van írva:
A teljes weblap lementése meg "wget -m <URL>" parancs lenne azt hiszem, ezt kiegészíted a load-cookies-zal, és menni fog. Érdemes megnézni a WGET dokumentációját, tud 1-2 finomságot. Azt hiszem van magyar dokumentáció is hozzá.
Más programokkal is biztosan lehet, ezzel a módszerrel. Kulcsszavaid: "web crawler" vagy "offline browsing".
Bocsánat, kicsit figyelmetlen voltam a gépelés közbe.
Utolsónak köszönöm, kipróbálom.
Szóval egy teljes weboldalt szeretnék letölteni, minden aloldallal, és fájllal együtt (nem csak 1 oldalt).
Az előtte író az iwiwet emlegette. Ez nem közösségi oldal, de nagyban hasonlít ahhoz, mintha az iwiwemen szeretnék minden oldalt lementeni, amihez hozzá férhetek.
Köszönöm a linket, kipróbálom.
akár hogy indítom, kilép.
CMD: C:\users\viktor\downloads>wget.exe a fájl helye. cd paranccsal benavigáltam, aztán elindítottam.. ugyanaz mintha explorerből indítanám.
A metaproducts offline browserjával sikerült :)
Azt hiszem, ismét megbizonyosodtam róla, hogy nem kell linux. :D
Grafikus felület nélkül elég nehezen boldogulok.
Kapcsolódó kérdések:
Minden jog fenntartva © 2024, www.gyakorikerdesek.hu
GYIK | Szabályzat | Jogi nyilatkozat | Adatvédelem | Cookie beállítások | WebMinute Kft. | Facebook | Kapcsolat: info(kukac)gyakorikerdesek.hu
Ha kifogással szeretne élni valamely tartalommal kapcsolatban, kérjük jelezze e-mailes elérhetőségünkön!