„Chronicrawl” változatai közötti eltérés

Innen: MIA
(Új oldal, tartalma: „{{DISPLAYTITLE:Chronicrawl}} Chronicrawl egy kísérleti stádiumban futó crawler. Célja, hogy költséghatékony állandóan futó aratások futtatását biztos…”)
 
1. sor: 1. sor:
  +
A Chronicrawl egy kísérleti stádiumban levő új [[crawler]], melyet az Ausztrál Nemzeti Könyvtár fejleszt elsősorban hírportálok lementéséhez. A rendszer a böngésző alapú archiválást kombinálja a hagyományosabb link feltáró módszerrel. A robot folyamatosan fut és adaptívan alkalmazkodik az egyes hírportálok oldalainak változási gyakoriságához. A fejlesztés során jelentkező legfontosabb kihívás éppen a változás mértékének és ütemének meghatározása az egyes aloldalak, illetve tartalmi egységek (rovatok) szintjén.
{{DISPLAYTITLE:Chronicrawl}}
 
Chronicrawl egy kísérleti stádiumban futó [[crawler]]. Célja, hogy költséghatékony állandóan futó aratások futtatását biztosítsa. A böngésző alapú aratás kezelést kombinálja a hagyományosabb link feltáró módszerrel. A robot állandóan fut és adaptívan alkalmazkodik az egyes webportálok elemeinek változási gyakoriságához. A fejlesztés során jelentkező legfontosabb kihívás éppen a változási gyakoriság felmérése, a portálok egyes aloldalainak illetve tartalmi egységeinek (rovatainak) szintjén. A projekt gazdája az Ausztrál Nemzeti Könyvtár.
 
   
 
----
 
----
   
* [ https://github.com/nla/chronicrawl A szoftver oldala a GitHub-on]
+
* [ https://github.com/nla/chronicrawl A Chronicrawl a GitHub-on]
   
 
[[Category:SZOFTVEREK]]
 
[[Category:SZOFTVEREK]]

A lap 2020. szeptember 7., 13:31-kori változata

A Chronicrawl egy kísérleti stádiumban levő új crawler, melyet az Ausztrál Nemzeti Könyvtár fejleszt elsősorban hírportálok lementéséhez. A rendszer a böngésző alapú archiválást kombinálja a hagyományosabb link feltáró módszerrel. A robot folyamatosan fut és adaptívan alkalmazkodik az egyes hírportálok oldalainak változási gyakoriságához. A fejlesztés során jelentkező legfontosabb kihívás éppen a változás mértékének és ütemének meghatározása az egyes aloldalak, illetve tartalmi egységek (rovatok) szintjén.