„Scrapy” változatai közötti eltérés
3. sor: | 3. sor: | ||
---- |
---- |
||
− | * [ |
+ | * [https://en.wikipedia.org/wiki/Scrapy Wikipedia: Scrapy] |
− | * [ |
+ | * [https://scrapy.org A Scrapy honlapja] |
− | * [ |
+ | * [https://github.com/scrapy/scrapy A Scrapy a GiHub-on] |
[[Category:SZOFTVEREK]] |
[[Category:SZOFTVEREK]] |
A lap 2023. július 29., 17:05-kori változata
Pythonban írt open source web crawling keretrendszer, első változata 2008-ban jelent meg. Eredetileg keresőrendszerekhez szánták, de alkalmas arra is, hogy weboldalakból strukturált adatokat gyűjtsön ki, de általános célú crawlerként is használható (pl. webarchiváláshoz), illetve webmesterek tesztelhetik is vele, hogy a webhelyüket hogyan tudják bejárni a robotok. Jelenleg a Scrapinghub gondozza a projektet.