Whitelist

Innen: MIA

A blacklist-tel ellentétben olyan dolgok nyilvántartása, amelyeket egy adott célra megfelelőeknek nyilvánítottak. Webaratás esetében olyan URL címeket tartalmazhat egy ilyen lista, amelyeket mindenképpen bejárhat a robot, mert megfelelnek pl. egy focused crawl szempontjainak. A whitelist mérete jóval nagyobb, mint a crawler elindításához használt, kiemelten jó, válogatott címeket tartalmazó seed lista, és éveken át építendő, karbantartandó az archiválás során szerzett tapasztalatok alapján.