| WeBlech URL Spider Gratis en open source download en spiegelende tool gemaakt in Java |
Download nu |
WeBlech URL Spider Rangschikking & Samenvatting
- Naam uitgever:
- WebLech URL Spider Team
- Besturingssystemen:
- Mac OS X
WeBlech URL Spider Tags
WeBlech URL Spider Beschrijving
Gratis en Open Source Download en Mirroring Tool gemaakt in Java Weblech is een gratis en open source, volledig uitgeruste website Download / Mirror-tool die is gemaakt in Java, die veel functies ondersteunt die nodig is om websites te downloaden en het normale webbrowsergedrag zoveel mogelijk te emuleren. WeBlech is multithreaded en wordt geleverd met een GUI-console. Hier zijn enkele belangrijke functies van "WeBLECH URL SPIDER": · Open source mit-licentie betekent dat het helemaal gratis is en je kunt doen wat je wilt · Pure Java-code betekent dat u het kunt uitvoeren op een JAVA-geactiveerde computer · Bediening met meerdere schroefdraad voor het downloaden van veel bestanden tegelijk · Ondersteunt elementaire HTTP-verificatie voor het openen van met een wachtwoord beveiligde sites · TTP-verwijzer ondersteuning onderhoudt linkinformatie tussen pagina's (die nodig zijn om sommige websites te spinnen) Veel configuratie-opties: · Diepte-eerste of breedte-eerste traversal van de site · Kandidaat-URL-filtering, zodat u zich aan één webserver, één map kunt vasthouden, of gewoon spin het hele web · Configureerbare caching van gedownloade bestanden Hiermee kunt u opnieuw opstarten zonder alles opnieuw te downloaden · URL Prioritization, zodat u eerst interessante bestanden kunt krijgen en saaie bestanden laat tot het laatst (of deze volledig negeren) · Controleren, zodat u spinstoestand in het midden van een run kunt knippen en opnieuw opstarten zonder veel verwerking. Vereisten: · Java Wat is er nieuw in deze release: · Toegevoegd classificatie van URL's als "interessant" of "saai" door eenvoudig · String matching. Interessante URL's worden gedownload in voorkeur aan · Saai. · Gescheiden spin uit de UI, die nu in UI / TEXSPIDER is. · Toegevoegd checkpointing and resume-functionaliteit, dus de spin kan zijn · Gedood en opnieuw opgestart zonder veel verwerking te doen. · Vaste URL-ophalen dus fragmenten (URL's met een # in hen) zijn dat niet · Behandeld als een nieuwe URL.
WeBlech URL Spider Gerelateerde software