niet krabben

A Web Crawler Creating Link Soups
Download nu

niet krabben Rangschikking & Samenvatting

Advertentie

  • Rating:
  • Vergunning:
  • GPL
  • Prijs:
  • FREE
  • Naam uitgever:
  • Niels Serup
  • Uitgever website:
  • http://metanohi.org

niet krabben Tags


niet krabben Beschrijving

Een webcrawler die koppelingssoepen maakt Niet-krabrawl is een webcrawler die alleen links opslaat. Het kruipt het web, maar probeert niet alles te doen. In plaats daarvan is het enige doel om sites recursief te controleren op links naar andere sites, die vervolgens ook worden gecontroleerd op links naar andere sites, enz. Dus, als site y links naar site x wordt opgeslagen, en als site x wordt opgeslagen is nog niet ingecheckt, het zal net zoals site y worden gecrawld. Vereisten: · Python


niet krabben Gerelateerde software