Ziggy Python-pakketten voor Hadoop Streaming
Download nu

Ziggy Rangschikking & Samenvatting

Ziggy Tags

Python-bibliotheek Python streaming Hadoop Hadoop Streaming

Ziggy Beschrijving

Python-pakketten voor Hadoop Streaming Ziggy is een Python-module die een verzameling Python-methoden biedt voor Hadoop Streaming. Ziggy is handig voor het bouwen van complexe mapreduce-programma's, met behulp van Hadoop voor batchverwerking van vele bestanden, Monte Carlo-processen, grafiekalgoritmen en gemeenschappelijke nutstaken (bijvoorbeeld Sorteren, zoeken). Typisch gebruik lijkt vaak eruit: #! / Usr / bin / env pythonimport ziggy.hdmc als HDMC van Glob Import Glob Files_to_Process = Glob ("/ Sommige / pad / *") Resultaten = HDMC.Submit_checkpoint_inline (script_to_run, output_fileName, bestanden_to_process, Argument_string) om uitloop te installeren: Python Setup.py Hadooppython Setup.py Installziggy is gewijzigd door Dan McClary, Ph.D. en is afkomstig in het Amaral Lab bij Northwestern University. Vereisten: · Python

Ziggy Gerelateerde software