Apache Whirr

Die Apache Whirr Bibliotheken sind in Java geschrieben, mit Streuseln von XML und Python.
Sie wurden geschrieben und kompiliert, um eine Einzelwerkzeuglösung, mit der Fülle von Cloud-Services und Cloud-basierte Werkzeuge, knallend aus überall im Internet in diesen Tagen arbeiten werden.
Diese Bibliotheken stellen eine gemeinsame Schnittstelle für die Interaktion mit jedem dieser Dienste / Werkzeuge, automatische Handhabung der Unterschiede zwischen ihnen.
Standardwerte für die einzelnen Dienste werden zur Verfügung gestellt und der Entwickler muss nur ein paar schnelle Änderungen vornehmen, um eine Schnittstelle zum Laufen withing Minuten

Eigenschaften .

• Unterstützte Dienstleistungen:
• Die meisten der Komponenten des Apache Hadoop-Stack
• Apache Mahout
• Chef
• Puppet
• Ganglia
• ElasticSearch
• Apache Cassandra
• Voldemort
• Hama


• Dienstleistungen können eingesetzt werden:
• Amazon EC2
• Rackspace Cloud

Was ist neu in dieser Pressemitteilung:

• Adapter für Openstack Clouds
• Erstellt Kerberos-Service
• hinzugekommen Python-Skripte, um ssh / scp in den VMs zu helfen
• Whirr Skript für Hadoop MRv2 GARN installiert, dass unterstützt die Hadoop-2.0.x und Hadoop 3.x (Stamm) Niederlassungen

Was ist neu in Version 0.5.0:

• Sub-Aufgaben:
• Unterstützung mehrerer Versionen von Zookeeper
• erstellen ClusterSpec bewusst BlobStoreContext Factory-Klasse
• Behobene Fehler:
• Melden Sie Warnung für nicht erfassten Dienstleistungsnamen
• Zookeeper Service sollte nur eine Autorisierung Eindringen zu Zookeeper Fälle
• Whirr hängt, wenn die Datei '$ HOME / .ssh / known_hosts' enthält eine veraltete Kennung für eine bestimmte IP-Adresse Host.
• Verbesserungen:
• eine effizientere Nutzung der ComputeServiceContext
• Fügen ClusterAction für generische Skriptausführung
• Verbesserte Fehlermeldung, wenn whirr.instance-Vorlagen aus der Config-links
• Unterstützung mehrerer Versionen von Hadoop
• Update Configuration Guides mit Rezept Info
• klar abzugrenzen, die Benutzer- und Service-Provider-APIs
• Neue Features:
• [CDH] Start andere Dienste auf Basis von CDH, nicht nur HDFS und MR
• Unterstützung der lokalen Tarball Upload
• Voldemort als Dienstleistung hinzufügen
• ElasticSearch als Dienstleistung hinzufügen
• Hinzufügen von Unterstützung für BYON

Was ist neu in Version 0.4.0:

• Fehler:
• Instanzen sollten in der in der Vorlage angegebenen Reihenfolge gestartet werden.
• [HBase] Integration Test nicht.
• Griff curl Timeouts besser.
• Log-Dateien sollten nicht in Tar-Archiv enthalten oder durch RAT überprüft werden.
• CDH und Hadoop-Integration Tests fehlschlagen.
• NPE für gestoppt EC2-Instanzen auf.
• Resource-Funktionen / install_cdh_hadoop.sh nicht gefunden beim Ausführen von der Befehlszeilenschnittstelle.
• Verbesserungen:
• Die Benutzer sollten in der Lage, eine beliebige Hadoop Eigenschaft vor dem Start überschreiben können.
• Upgrade auf jclouds 1,0-beta-9.
• Rezept für eine HBase Cluster.
• Anzeige verfügbaren Rollen anstelle von Service-Namen bei der Ausführung ./bin/whirr.
• Neue Features:
• Benutzern erlauben, wie sich in Cluster loggt sein.
• Unterstützung benutzerdefinierte Bilder.
• Unterstützung lokal erbrachte Skripte.
• Fügen Sie die Möglichkeit, einen Cluster-Instanz zu zerstören.

Was ist neu in Version 0.1.0:

• Unteraufgabe:
• Geben Sie die ersten Schritte Dokumentation - getting-started.confluence
• Document und umzusetzen Release-Prozess
• Fügen Sie KEYS-Datei in Verteilerverzeichnis
• Veröffentlichen Maven Artefakte http://repository.apache.org
• Update Quick Start Dokumentation mit Release 0.1.0 arbeiten
• Bug:
• Hadoop-Cloud-Push-Befehl ruft Proxy-Erstellung
• Sie manuelle Installation von Apache RAT erfordern nicht zu kompilieren
• Fix RAT Warnungen aufgrund von Site-Dateien
• Cassandra POM sollte auf der obersten Ebene ab
• Abhilfe Fehler 331 in jclouds (Einige EC2ComputeService Operationen scheitern gestoppt Instanzen)
• Nur Zugriff auf Cluster von definierten Netzwerken erlauben
• Hadoop-Service ist gebrochen
• Integrationstests sollten nicht auf & quot laufen; mvn install & quot;
• Log4j vom CLI JAR fehlt
• Verbesserung:
• erstellen Ant Build für die Ausführung von Unit-Tests EC2
• Unterstützung zusätzlicher Sicherheitsgruppe Option in Hadoop-ec2 script
• erstellen setup.py für EC2 Cloud-Skripte
• Gene RAT Bericht
• Erzwingen Quellcode Stil
• Separate Einheit und Integration (System) Prüfungen
• Upgrade auf jclouds 1,0-beta-6
• zulassen Skript Stellen überschrieben werden
• Fügen Whirr schnellen Start zu README.txt und Website (sobald es live)
• Update POM auf Apache RAT Punkt 0.8-SNAPSHOT
• Öffnen Sie Ports 50010 (Jobtracker) und 50.070 (NameNode) für das Hadoop-Service
• Fügen Kern javadoc
• Erstellen Sie eine Service-Fabrik
• Lassen Sie den Hadoop-Service auf Rackspace Cloud-Servern ausgeführt werden
• Übernehmen Sie die Standard-Java-SPI-Schnittstelle
• Implementieren Service / cdh
• Führen Sie die Benennung Konsistenz für Cloud Service Provider
• Unify ClusterSpec und ServiceSpec
• entkoppeln Schlüsselpaare aus den Dateien, die sie zu halten
• Verwenden Commons Konfiguration von Clusterdaten zu verwalten
• Bereinigen POM Abhängigkeiten
• Neues Feature:
• Hinzufügen von Unterstützung für EBS Speicherung auf EC2
• Führen namenode und Jobtracker auf separaten EC2-Instanzen
• schreiben Rackspace Cloud-Anbieter
• Fügen Sie einen Zookeeper-Service zu den Cloud-Skripte
• Fügen Sie Cassandra Service
• Fügen Sie eine Befehlszeilenschnittstelle
• Aufgabe:
• Import ursprünglichen Quellcode von Hadoop contrib
• Import ursprünglichen Java-Quellcode
• Neues Projekt-Webseite
• Fügen Sie Zielverzeichnisse zu svn ignorieren
• Mitteilung Version 0.1.0