Hericrawler
A lap korábbi változatát látod, amilyen Admin (vitalap | szerkesztései) 2021. július 25., 15:31-kor történt szerkesztése után volt. (Új oldal, tartalma: „Az Internet Archive által használt, saját fejlesztésű rendszer a nagy méretű aratások során a crawler vezérlésére a bejárási sorrendet illetően.…”)
Az Internet Archive által használt, saját fejlesztésű rendszer a nagy méretű aratások során a crawler vezérlésére a bejárási sorrendet illetően. A fontosabb webhelyeknek nagyobb prioritás adható vele, a legkevésbé fontosakat pedig csak akkor kezdi el aratni a Heritrix, amikor a többivel már végzett.
