robotdetectie Bibliotheek voor het detecteren als een HTTP-gebruikersagentopnemer waarschijnlijk een bot is
Download nu

robotdetectie Rangschikking & Samenvatting

robotdetectie Tags

Python-bibliotheek Python Http robot

robotdetectie Beschrijving

Robot_Detection is een Python-module om te detecteren of een bepaalde HTTP-gebruikersagent een webcrawler is. Het maakt gebruik van de lijst met geregistreerde robots van http://www.robotstxt.org: Robots-database.USAGETHERE is er slechts één, functie, is_robot die een touw (Unicode of niet) inneemt en de true IFF weerhoudt, komt overeen met een bekende robot in de robotstxt.org Robot DatabaseExample >>> Import Robot_Detection >>> Robot_Detection.is_Robot (User_Altent_string) UpdatingU kunt een nieuwe versie van de robotdatabase van deze link downloaden. Download de database-dump en voert u het bestand Robot_Detection.py met het bestand met het bestand als eerste uit. Argument.Wet http://www.robotstxt.org/db/all.txt $ Python Robot_Detection.py ALL.TXTIF De database is gewijzigd, het zal de nieuwe versie van Robot_Useragents-variabele afdrukken die u in de bron moet doen Code.testsom Simple Unittests zijn inbegrepen. Het uitvoeren van het tests.py-bestand zal de homepage van de tests.product uitvoeren

robotdetectie Gerelateerde software