Admin: Új oldal, tartalma: „A Leibniz Institute for Psychology munkatársa által a 2018-2019-es években kifejlesztett, a Chrome-ot headless browser módban vezérlő, Pythonban írt archivá…”

2021-06-27T13:51:16Z

Új oldal, tartalma: „A Leibniz Institute for Psychology munkatársa által a 2018-2019-es években kifejlesztett, a Chrome-ot headless browser módban vezérlő, Pythonban írt archivá…”

Új lap

A Leibniz Institute for Psychology munkatársa által a 2018-2019-es években kifejlesztett, a Chrome-ot [[headless browser]] módban vezérlő, Pythonban írt archiváló program, elsősorban a sok Javascriptet használó (például webkettes) oldalak minél jobb minőségű mentéséhez. Csak Linux alatt futtatható és csak parancsmódban, a letöltött tartalom pedig [[WARC]] fájlokba kerül. Nem a szervertől kapott válaszokat tárolja, hanem a weboldal body részének a böngésző által értelmezett, Javascript-mentes változatát, egységesített UTF-8 kódolással (DOM snapshot). A külalak minél pontosabb megőrzése céljából oldalképet is készít, amit szintén a WARC konténerbe ment. Vannak hozzá plug-inként beépíthető "behavior" szkriptek, melyekkel különböző felhasználói interakciók szimulálhatók (pl. görgetés, kattintás) – persze ezek csak addig működnek, amíg a szolgáltató nem változtat a felületén. Például a következő platformokhoz készültek ilyen "robotpilóták", amikkel egy-két művelet automatizálható: Facebook, Twitter, Reddit, Youtube, Patreon, Gab, Github, Imgur, Vimeo.

----

* [https://6xq.net/crocoite/ A Crocoite weboldala]
* [https://github.com/PromyLOPh/crocoite A Crocoite a GitHub-on]

[[Category:SZOFTVEREK]]

Crocoite - Laptörténet

Admin: Új oldal, tartalma: „A Leibniz Institute for Psychology munkatársa által a 2018-2019-es években kifejlesztett, a Chrome-ot headless browser módban vezérlő, Pythonban írt archivá…”