„Scrapy” változatai közötti eltérés
3. sor: | 3. sor: | ||
---- |
---- |
||
− | * [https:// |
+ | * [https://hu.wikipedia.org/wiki/Scrapy Wikipédia: Scrapy] |
* [https://scrapy.org A Scrapy honlapja] |
* [https://scrapy.org A Scrapy honlapja] |
||
* [https://github.com/scrapy/scrapy A Scrapy a GiHub-on] |
* [https://github.com/scrapy/scrapy A Scrapy a GiHub-on] |
A lap jelenlegi, 2024. január 9., 13:27-kori változata
Pythonban írt open source web crawling keretrendszer, első változata 2008-ban jelent meg. Eredetileg keresőrendszerekhez szánták, de alkalmas arra is, hogy weboldalakból strukturált adatokat gyűjtsön ki, de általános célú crawlerként is használható (pl. webarchiváláshoz), illetve webmesterek tesztelhetik is vele, hogy a webhelyüket hogyan tudják bejárni a robotok. Jelenleg a Scrapinghub gondozza a projektet.