Scrapy

Scrapy to internetowy wysoki poziom indeksowania i skrobanie ram do pisania pająki raczkować i analizowania stron internetowych dla wszystkich rodzajów celów, od wyszukiwania informacji w celu monitorowania i testowania witryn internetowych.

Opis :

• Proste:
• Scrapy został zaprojektowany z myślą o prostocie, dostarczając potrzebnych funkcji bez uzyskiwania w sposób


• Wydajny:
• Wystarczy napisać reguły na pozyskiwanie danych ze stron internetowych i niech Scrapy indeksować całą witrynę internetową dla Ciebie


• Szybkie:
• Scrapy jest używany w produkcji roboty całkowicie zeskrobać ponad 500 witryn handlowych dziennie, wszystko w jednym serwerze,


• Extensible:
• Scrapy został zaprojektowany z myślą o rozszerzalności i tak zapewnia kilka mechanizmów, aby podłączyć nowy kod bez konieczności dotykania podstawowych ram


• Przenośny:
• Scrapy działa na Linux, Windows, Mac i BSD


• Open Source, 100% Python:
• Scrapy zostało napisane w Pythonie, które sprawia, że ​​bardzo łatwo się włamać,


• Dobrze przetestowane:
• Scrapy posiada szeroką zestaw testów z bardzo dobrej pokrycia kodu

Wymagania :

• Python