Abot

Innen: MIA

Amerikai programozó által 2014 óta C# nyelven fejlesztett open source web crawler keretrendszer. Nagyon gyors, kis méretű, több szálon futó, jól testreszabható, alaposan kitesztelt és nem függ más szoftverektől vagy szolgáltatásoktól. Van hozzá egy részben fizetős AbotX nevű bővítmény is, amivel egyszerre több webhely is aratható, végrehajthatók a Javascriptek, elkerülhető a robot blokkolása, automatikusan hangolható az aratás sebessége és párhuzamossága, megállítható és újraindítható a job, és egyszerűbben csatolhatók hozzá saját modulok. Működéséhez .NET framework 4.6.1 vagy .NET Core 2+ környezet szükséges.