Tokenizer

Splitst de tekst in tokens volgens een reeks reguliere uitdrukkingen die u opgeeft
Download nu

Tokenizer Rangschikking & Samenvatting

Advertentie

  • Rating:
  • Vergunning:
  • Donationware
  • Naam uitgever:
  • Charcoal Design
  • Besturingssystemen:
  • Mac OS X
  • Bestandsgrootte:
  • 12 KB

Tokenizer Tags


Tokenizer Beschrijving

Splitst de tekst in tokens volgens een reeks reguliere uitdrukkingen die u opgeeft Met de RealBasic Tokenizer-klasse kunnen ontwikkelaars eenvoudig tekst in tokens splitsen volgens een reeks reguliere uitdrukkingen die u opgeeft. Tokenizer kan voor verschillende doeleinden worden gebruikt - voor het parseren van gegevensbestanden, of zelfs als onderdeel van de eerste fase voor een PARDER van de programmeertaal. De functionaliteit is vergelijkbaar met de Lexx-bibliotheek van de UNIX-wereld. De Tokenizer-testtoepassing toont aan met behulp van de Tokenizer-klasse om een eenvoudig basisprogramma te ontleden in de samenstellende tokens, die worden weergegeven in een lijst onder het veld Tekstinvoer. Het voorbeeldprogramma bevat een opzettelijke fout - het woord "nteger" zou "integer" moeten zijn - die dient om te laten zien hoe het tokenizer onverwachte tokens behandelt. De toepassing is ingesteld om de tekst opnieuw aan te trekken wanneer deze wordt gewijzigd, dus probeer het programma te worden gewijzigd. en observeer hoe de tokenlijst wordt geregenereerd. Vereisten: · RealBasic Wat is er nieuw in deze release: · Vast het probleem met het gebruik van \ om het \ teken onmiddellijk voor een (of [beugel te matchen.


Tokenizer Gerelateerde software

Parser

Helpt ontwikkelaars een eenvoudig basisprogramma in zijn samenstellende tokens die de Tokenizer-klasse gebruiken ...

410 16 KB

Downloaden

Pybufr

Een interface om de BUFR-bibliotheek van ECMWF uit Python te gebruiken ...

185 0 KB

Downloaden