StormCrawler

Innen: MIA

A brit DigitalPebble cég által támogatott, 2014 óta fejlesztett, nagyrészt Java nyelvű open source programkönyvtár és eszközkészlet alacsony késleltetésű, rugalmas, jól skálázható, könnyen bővíthető, udvarias, de hatékony crawler-ek készítéséhez, melyek az Elasticsearch rendszert és az adatfolyamokat valós időben feldolgozó Apache Storm technológiát használják (ezért az Apache Mavent is telepíteni kell hozzá).