Scrapy

Scrapy ist ein hohes Maß Web-Crawling und Kratzen Framework zum Schreiben Spinnen zu crawlen und zu analysieren Web-Seiten für alle möglichen Zwecke, von der Informationsgewinnung für die Überwachung oder Prüfung Websites.

Eigenschaften

• Ganz einfach:
• Scrapy wurde mit Einfachheit im Verstand, indem sie die Funktionen, die Sie benötigen, ohne im Weg entwickelt,


• Die Produktions:
• Schreiben Sie einfach die Regeln, die Daten aus Web-Seiten zu extrahieren und lassen Scrapy kriechen die gesamte Website für Sie


• Schnell:
• Scrapy in Produktions Crawler verwendet werden, um vollständig zu kratzen mehr als 500 Händler-Websites täglich, all das in einem Server


• Extensible:
• Scrapy wurde mit Erweiterbarkeit konzipiert und bietet somit mehrere Mechanismen, um neuen Code, ohne den Kern zu berühren Rahmen stecken


• Portable:
• Scrapy läuft unter Linux, Windows, Mac und BSD


• Open Source und 100% Python:
• Scrapy ist komplett in Python geschrieben, was es sehr einfach macht, um zu hacken


• Gut getestet:
• Scrapy verfügt über eine umfangreiche Testreihe mit sehr guten Testabdeckung

Anforderungen :

• Python