Jug

Krug ist ein Python-Implementierung des MapReduce Framework (jetzt ein Standardbestandteil von Hadoop ), ermöglicht es Entwicklern, Code, der in verschiedenen Formen der Parallelisierung laufen kann schreiben.
Das bedeutet, Code, die parallel auf der gleichen Maschine über ein Rechencluster (mehrere Rechner) ausgeführt werden kann, oder.
Jug können Entwickler Code in kleinere Stücke zu organisieren, und die Auswahl, wo, wie und wann es zu laufen.
Dies mag zwar übertrieben für kleine Websites und Apps ist, kann dieses Verhalten sehr nützlich bei Anwendungen mit hoher Verkehrsbelastung oder dass große Datenmengen zu verarbeiten.
Jug können speichern Daten lokal über die Festplatte zu arbeiten und, oder es Remote-Speicher verwenden können. Für den letzteren Fall wird der Redis Datenbank unterstützt

Eigenschaften .

• Persistent Datenspeicherung Unterstützung
• Reuses Teilergebnisse
• Concurrency Unterstützung
• Lokale Datenspeicher
• Remote-Datenspeicherung
• Betriebsstatus-Checker

Was ist neu in dieser Pressemitteilung:

• Python 3 Kompatibilitätsfixes
• fsync (Verzeichnis) in der Datei Backend
• Jug Haken (meist noch nicht dokumentiert, aber schon damit Vereinfachung interner Code)

Was ist neu in Version 0.9.7:

• Fix Verwendung numpy Klassen
• Fix redis URL Parsing
• Fix `` shell`` Neuere Versionen der IPython
• richtig wieder auf nicht-sqlite `` status`` fallen

Was ist neu in Version 0.9.6:

• Schnellere Dekodierung
• Hinzugefügt Krug-execute script
• hinzugekommen describe () Funktion
• Hinzugefügt write_task_out () Funktion

Was ist neu in Version 0.9.1:

• Hinzugefügt `` webstatus`` Befehl
• Hinzugefügt bValue () Funktion
• Fixed bug in `` shell`` Unterbefehl (Wert `` `` nicht im globalen Namespace)
• Verbesserte Identität ()
• Behoben: Fehler bei der Verwendung Tasklets und --aggressive-Entlade
• Fixed bug mit Tasklets und Schlaf-bis / Check

Was ist neu in Version 0.9:

• In der Gegenwart einer Barriere (), führen Sie den jugfile . Dies macht Barriere viel einfacher zu verwenden.
• Hinzugefügt set_jugdir die öffentliche API.
• hinzugekommen CompoundTaskGenerator.
• Unterstützung von Unterklassen der Aufgabe.
• Vermeiden Sie das Erstellen von Verzeichnissen in der Datei-Backend, wenn es notwendig ist.
• Fügen jug.mapreduce.reduce (das ist die eingebaute reduzieren imitiert).

Was ist neu in Version 0.8.1:

• Fix redis Backend für eine neue Version von Client-Modul
• Schneller Dateispeicher für große Dateien
• Fix `invalidate` mit Tasklets
• Installieren Sie Tests und haben sie lauffähig sein
• geändert Hash-Berechnungsverfahren. Dies hat einen besonderen Fall auf numpy Arrays
• (für Geschwindigkeit) und ist erweiterbar durch eine __jug_hash__ Haken
• Fix bug mit Tasklet Abhängigkeiten nicht ordnungsgemäß berücksichtigt werden
• Fix Shell Unterbefehl in neueren Versionen von ipython
• Fügen __FILE__ Attribut zu fälschen jugmodule

Was ist neu in Version 0.8:

• Tasklets
• Fix Fehler in Schlaf-und Aufräumarbeiten, bis
• Fix Fehler mit CompoundTask (Sie musste Krug laufen zweimal vor dem Ausführen).

Was ist neu in Version 0.8-b0:

• Tasklets - Fix Fehler in Schlaf-und Aufräumarbeiten bis .

Was ist neu in Version 0.7.4:

• Fix Fall, dass ~ / .jug / configrc tut gibt es nicht.
• Drucken Hostnamen-Datei auf file_store sperren.
• Refactoring Umsetzung der Optionen.
• Fix Entladen Aufgaben, die nicht ausgeführt werden können.
• Fix verkleinern für leere Eingabe.

Was ist neu in Version 0.7.3:.

• Parse ~ / .jug / configrc
• Fix bug mit Wartezeiten.
• Sonderfall spart der numpy Arrays.
• In ausdrucks jugdir Syntax.
• Speichern dict_store Backend auf die Festplatte.

Was ist neu in Version 0.7.2:.

• Enthaltene fehlenden Dateien in der Distribution

Was ist neu in Version 0.7.1:.

• Schlaf-Unterbefehl, bis
• Fix für barriere () und verkleinern Interaktion.
• Dokumentation verbessert.

Was ist neu in Version 0.7:

• Bessere `` shell`` Befehl
• Schrieb Verfahren zum Laden jugfiles
• Aufgaben haben ursprüngliche Funktion zugänglich wie `f`

Was ist neu in Version 0.6.9:.

• New Prüfbefehl
• load_all () Innenschale.

Was ist neu in Version 0.5.2:.

• New `shell` Befehl
• Compression in redis Backend.
• Verbesserungen bei der Geschwindigkeit für "ungültig" Befehl.

Was ist neu in Version 0.5.1:

• Redis Backend
• Wörterbuch Abhängigkeiten
• Geänderte Befehlszeilenschnittstelle (Krug Befehl jugfile ...)

Anforderungen :

• Python 2.6 oder höher