Schroot Een gratis en hoogwaardig schraap- en web kruipend raamwerk voor het schrijven van spinnen om webpagina's te kruipen en te ontleden
Download nu

Schroot Rangschikking & Samenvatting

Schroot Tags

kader Web Framework kruipen Schraapwebsite schrapen Crawl-website

Schroot Beschrijving

Een gratis en hoog niveau schrapend en web kruipend raamwerk voor het schrijven van spinnen om webpagina's te kruipen en te ontleden Scrapy is een snel en open source op hoog niveau screen-scraping en web kruipend framework, dat wordt gebruikt om websites te kruipen en gestructureerde gegevens uit hun pagina's te halen.Scrape kan voor een breed scala aan doeleinden worden gebruikt, van datamining tot monitoring en geautomatiseerde tests. Hier zijn enkele belangrijke kenmerken van "Scrapy": Gemakkelijk: · Scrapy is ontworpen met eenvoud in gedachten, door de functies te bieden die je nodig hebt zonder je in de weg te gaan. Productief: · Schrijf gewoon de regels om de gegevens uit webpagina's uit te halen en de scrapy de hele website voor u te laten kruipen. Snel: · Scrapy wordt gebruikt in productiecrawlers om dagelijks meer dan 500 retailer-sites te schrapen, allemaal in één server. Extensible: · Scrapy is ontworpen met uitbreidbaarheid in gedachten en dus biedt het verschillende mechanismen om nieuwe code aan te sluiten zonder de framework-kern te hoeven raken. Draagbaar: · Slapy loopt op Mac, Linux, Windows en BSD. Open Source en 100% Python: · Scrapy is volledig geschreven in Python, waardoor het heel gemakkelijk is om te hacken. Goed getest: · Scrapy heeft een uitgebreide testsuite met zeer goede code-dekking. Vereisten: · Python · LibXML2

Schroot Gerelateerde software