Apache Chukwa

Apache Chukwa kann verwendet werden, um die Aktivität zu protokollieren, die in einem komplexen Hadoop verteilten Computersystem geschieht.

Chukwa hilft Entwicklern Probleme aufzuspüren und zu lösen Fehler in den Datenverarbeitungsanwendungen, durch ein Toolkit für nicht nur die Bereitstellung alle Berechnungen der Aufnahme, die auftreten, sondern auch zu analysieren, klassifizieren und dann die sich ergebenden Daten.

Das Projekt ist eng mit dem MapReduce-Philosophie integriert und da es nativ HDFS (Hadoop Distributed File System) verwendet, wird es aus der Box mit Hadoop betrieben Projekten arbeiten.

Was ist neu in dieser Version:

• nEUE FEATURES:
• Migration von Ameise zu Maven.
• Added Metrics 2 Unterstützung für Hadoop 0.20.203 +.
• hinzugefügt Cluster Zusammenfassung Schwein Skript.
• hinzugefügt verdaut Systemmetriken zu SystemMetrics demux-Parser.
• hinzugefügt Konfiguration HBase Schema-Validierung für HBaseWriter.
überspringen
• Update Standard Chukwa Konfigurationsdateien SocketAdaptor für Hadoop-Metriken-Streaming zu verwenden.
• Konfiguration der Rechtschreibprüfung.
• Implementiert Grafik Rest api und Grafik-Explorer für HBase Daten auf grafische Darstellung.
• Implementiert Syslog-Adapter für mappig syslog Namen Chukwa Datentyp.
• Ersetzte Systemmetriken Sammlung mit Sigar.
• hinzugefügt HBaseWriter für Zeitreihendaten in HBase für schnellere zufällige Lese- / Schreib-Speichern.
• Als Standard-Prozessor konfiguriert werden.
• Unterstützung HTTP Trigger-Aktionen.
• hinzugefügt JMSAdaptor.
• Unterstützung post-demux-Trigger.

Was ist neu in Version 0.6.0:

• NEUE FEATURES:
• Migration von Ameise zu Maven.
• Added Metrics 2 Unterstützung für Hadoop 0.20.203 +.
• hinzugefügt Cluster Zusammenfassung Schwein Skript.
• hinzugefügt verdaut Systemmetriken zu SystemMetrics demux-Parser.
• hinzugefügt Konfiguration HBase Schema-Validierung für HBaseWriter.
überspringen
• Update Standard Chukwa Konfigurationsdateien SocketAdaptor für Hadoop-Metriken-Streaming zu verwenden.
• Konfiguration der Rechtschreibprüfung.
• Implementiert Grafik Rest api und Grafik-Explorer für HBase Daten auf grafische Darstellung.
• Implementiert Syslog-Adapter für mappig syslog Namen Chukwa Datentyp.
• Ersetzte Systemmetriken Sammlung mit Sigar.
• hinzugefügt HBaseWriter für Zeitreihendaten in HBase für schnellere zufällige Lese- / Schreib-Speichern.
• Als Standard-Prozessor konfiguriert werden.
• Unterstützung HTTP Trigger-Aktionen.
• hinzugefügt JMSAdaptor.
• Unterstützung post-demux-Trigger.

Was ist neu in Version 0.4.0:

• Die Sammlung von Shell-Skripten in / bin gewesen deutlich abgespeckt. Zum Beispiel sollte anstelle von bin / Agent, Sie jetzt bin / chuka Agent sagen.
• Es ist nun möglich, Remote-Verbindungen zu den Chukwa Agent zu deaktivieren. Dies macht Chukwa besser geeignet zur Verwendung auf einer kundenorientierten Bereitstellung
• Chukwa enthält nun einen Adapter für Daten über einen UDP-Port, der UDPAdaptor zu lesen. Dies sollte die Integration mit syslog und ähnlichen älteren Tools erleichtern.
• Es wurden seit der letzten Version eine Reihe von Bugfixes und Code Cleanups gewesen; überprüfen Sie das Changelog und JIRA für Details.

Anforderungen: :

• Java 1.6 oder höher
• Apache Hadoop 0.20.205.1 oder höher
• Apache HBase 0.90.4 oder höher