Scrapy

érdesebbek egy magas szintű web mászik és kaparó keretet írásban pókok feltérképezni és elemezni weboldalak mindenféle célra, a információkeresés az ellenőrzés és tesztelés weboldalak.

Tulajdonságok :

• Egyszerű:
• érdes volt a célja, egyszerűséget szem előtt tartva, azzal, hogy a szükséges funkciókat anélkül kerülgetni


• Hatékony:
• Csak írni a szabályokat, hogy kivonják az adatokat a weboldalakat, és hagyja, hogy érdesebbek feltérképezni az egész weboldal az Ön számára


• Fast:
• érdesebbek használják a termelés csúszómászó teljesen kaparja több mint 500 kiskereskedelmi területek, minden nap egy szerver


• Extensible:
• érdes volt a célja a bővíthetőség szem előtt, és így biztosítja különböző mechanizmusokat dugja új kódot anélkül, hogy megérintse a keret magját


• Hordozható:
• érdesebbek fut Linux, Windows, Mac és BSD


• Open Source és 100% Python:
• érdesebbek teljesen Pythonban, ami nagyon könnyen hack


• jól bevált:
• érdesebbek kiterjedt tesztsorozat nagyon jó kódlefedettséget

követelmények :

• Python