https://webarchivum.oszk.hu/mediawiki/index.php?action=history&feed=atom&title=Website-scraper 2026-04-28T04:17:09Z Az oldal laptörténete a wikiben MediaWiki 1.31.16 https://webarchivum.oszk.hu/mediawiki/index.php?title=Website-scraper&diff=1557&oldid=prev 2021-07-18T17:29:24Z

<p>Új oldal, tartalma: „Ukrán programozók által 2014 óta fejlesztett open source Javascript eszközkészlet webhelyek fájlrendszerbe való mentésére. A &#039;&#039;node-website-scraper&#039;&#039; nevű (a…”</p> <p><b>Új lap</b></p><div>Ukrán programozók által 2014 óta fejlesztett open source Javascript eszközkészlet webhelyek fájlrendszerbe való mentésére. A ''node-website-scraper'' nevű (a Node.js könyvtárra épülő) komponens végzi a fájlok letöltését és a linkek követését, de mivel ez nem hajtja végre a Javascripteket, ezért csak a HTML és a CSS fájlokban levő linkek kielemzésére alkalmas. Paraméterezhető a linkek követésének mélysége, az egyidejű kérések száma, a nem követendő URL-ek mintázata, a letöltendő fájltípus(ok), az archív fájlok és alkönyvtárak neve, valamint külső plugin-ok bekapcsolásával további funkciók is elérhetők. (Pl. a [[PhantomJS]]-t használó ''website-scraper-phantom'' vagy a Puppeteer-t vezérlő ''website-scraper-puppeteer'' modul hozzáadásával dinamikus weboldalak is lementhetők vele.) Nyilvános demója is van, amivel egy általunk megadott URL címen levő weboldalt tudunk elmenteni és visszanézni, illetve ZIP csomagként letölteni.<br /> <br /> ----<br /> <br /> * [https://github.com/website-scraper/ A website-scraper a GitHub-on]<br /> * [https://www.npmjs.com/package/website-scraper A website-scraper az npm szerveren]<br /> * [https://scraper.nepochataya.pp.ua/ Nyilvános demó]<br /> <br /> [[Category:SZOFTVEREK]]</div>

Admin