thearchivist Thearchivist - Web-Crawler voor het downloaden en archiveren van webinhoud
Download nu

thearchivist Rangschikking & Samenvatting

thearchivist Tags

web webspin crawler Web Crawler spin archiefinhoud

thearchivist Beschrijving

Thearchivist - Web-Crawler voor het downloaden en archiveren van webinhoud Thearchivist is een webcrawler voor het downloaden en archiveren van webinhoud, het herschrijven van absolute links als het gaat. Variabele "Stopping Rules" Zorg ervoor dat u niet probeert het hele web te archiveren! Beginnend met een bepaalde URL die de webpagina opneemt, scant u deze voor links en probeert vervolgens alle bestanden op te halen. Dit gedrag herhaalt Elk bestand ging door totdat een van de verschillende stopcriteria is bereikt. Als het gewenst, herschrijft de applicatie absolute URL's ten opzichte van de downloadhiërarchie, het produceren van een volledig zelfvoorzienend archief. Wat is nieuw in deze release: gecorrigeerde parsering van JavaScript-functie Referenties, PHP en ASP toegevoegd om "HTML" -bestandsextensies te herkennen, vaste bug die door de beperking "Legal Servers" wordt afgekapt.

thearchivist Gerelateerde software