„Chronicrawl” változatai közötti eltérés
(Új oldal, tartalma: „{{DISPLAYTITLE:Chronicrawl}} Chronicrawl egy kísérleti stádiumban futó crawler. Célja, hogy költséghatékony állandóan futó aratások futtatását biztos…”) |
|||
| (Egy közbenső módosítás ugyanattól a szerkesztőtől nincs mutatva) | |||
| 1. sor: | 1. sor: | ||
| + | A Chronicrawl egy kísérleti stádiumban levő új [[crawler]], melyet az Ausztrál Nemzeti Könyvtár fejleszt elsősorban hírportálok lementéséhez. A rendszer a böngésző alapú archiválást kombinálja a hagyományosabb link feltáró módszerrel. A robot folyamatosan fut és adaptívan alkalmazkodik az egyes hírportálok oldalainak változási gyakoriságához. A fejlesztés során jelentkező legfontosabb kihívás éppen a változás mértékének és ütemének meghatározása az egyes aloldalak, illetve tartalmi egységek (rovatok) szintjén. |
||
| − | {{DISPLAYTITLE:Chronicrawl}} |
||
| − | Chronicrawl egy kísérleti stádiumban futó [[crawler]]. Célja, hogy költséghatékony állandóan futó aratások futtatását biztosítsa. A böngésző alapú aratás kezelést kombinálja a hagyományosabb link feltáró módszerrel. A robot állandóan fut és adaptívan alkalmazkodik az egyes webportálok elemeinek változási gyakoriságához. A fejlesztés során jelentkező legfontosabb kihívás éppen a változási gyakoriság felmérése, a portálok egyes aloldalainak illetve tartalmi egységeinek (rovatainak) szintjén. A projekt gazdája az Ausztrál Nemzeti Könyvtár. |
||
---- |
---- |
||
| − | * [ |
+ | * [https://github.com/nla/chronicrawl A Chronicrawl a GitHub-on] |
[[Category:SZOFTVEREK]] |
[[Category:SZOFTVEREK]] |
||
A lap jelenlegi, 2023. július 12., 16:19-kori változata
A Chronicrawl egy kísérleti stádiumban levő új crawler, melyet az Ausztrál Nemzeti Könyvtár fejleszt elsősorban hírportálok lementéséhez. A rendszer a böngésző alapú archiválást kombinálja a hagyományosabb link feltáró módszerrel. A robot folyamatosan fut és adaptívan alkalmazkodik az egyes hírportálok oldalainak változási gyakoriságához. A fejlesztés során jelentkező legfontosabb kihívás éppen a változás mértékének és ütemének meghatározása az egyes aloldalak, illetve tartalmi egységek (rovatok) szintjén.
