Apache Chukwa

Apache Chukwa μπορεί να χρησιμοποιηθεί για να καταγράψει την δραστηριότητα που συμβαίνει σε ένα σύνθετο Hadoop κατανεμημένο υπολογιστικό σύστημα.

Chukwa θα βοηθήσει τους προγραμματιστές να εντοπίσουμε τα προβλήματα και την επίλυση σφάλματα στις εφαρμογές επεξεργασίας δεδομένων, παρέχοντας ένα σύνολο εργαλείων για την όχι μόνο την καταγραφή όλων των υπολογισμών που συμβαίνουν, αλλά και την ανάλυση, ταξινόμηση και στη συνέχεια εμφανίζει τα οδήγησαν δεδομένων.

Το έργο είναι στενά συνδεδεμένη με τη φιλοσοφία MapReduce και δεδομένου ότι εγγενώς χρησιμοποιεί ΚΑΕ (Hadoop Distributed System File) θα λειτουργήσει έξω από το κουτί με Hadoop τροφοδοτείται έργα.

τι είναι νέο σε αυτήν την έκδοση:

• νέα χαρακτηριστικά:
• Μετεγκατάσταση από το μυρμήγκι να maven.
• Προστέθηκε Metrics 2 υποστήριξη για Hadoop 0.20.203 +.
• Προστέθηκε σύμπλεγμα σενάριο σύνοψη των χοίρων.
• Προστέθηκε πέψη μετρήσεις του συστήματος για να SystemMetrics demux αναλυτή.
• Προστέθηκε διαμόρφωσης για να παρακάμψετε την επικύρωση σχήματος HBase για HBaseWriter.
• Ενημέρωση προεπιλεγμένα αρχεία ρυθμίσεων Chukwa να χρησιμοποιήσετε SocketAdaptor για Hadoop μετρήσεις ροής.
• ορθογραφικό έλεγχο διαμόρφωσης.
• Σε εφαρμογή γραφικών παραστάσεων υπόλοιπο API και γραφική εξερευνητής για τη χάραξη δεδομένων HBase στο γράφημα.
• Εφαρμόζεται Syslog Adaptor για mappig όνομα εγκατάσταση syslog για να Chukwa τύπου δεδομένων.
• Αντικαταστάθηκε συλλογή των μετρήσεων του συστήματος με sigar.
• Προστέθηκε HBaseWriter για την αποθήκευση των δεδομένων χρονοσειρών σε HBase για ταχύτερη τυχαία ανάγνωσης / εγγραφής.
• Κάντε προεπιλεγμένο επεξεργαστή ρύθμισης.
• Δράσεις υποστήριξης HTTP σκανδάλη.
• Προστέθηκε JMSAdaptor.
• Υποστήριξη μετά demux σκανδάλη.

Τι είναι καινούργιο στην έκδοση 0.6.0:

• Νέα χαρακτηριστικά:
• Μετεγκατάσταση από το μυρμήγκι να maven.
• Προστέθηκε Metrics 2 υποστήριξη για Hadoop 0.20.203 +.
• Προστέθηκε σύμπλεγμα σενάριο σύνοψη των χοίρων.
• Προστέθηκε πέψη μετρήσεις του συστήματος για να SystemMetrics demux αναλυτή.
• Προστέθηκε διαμόρφωσης για να παρακάμψετε την επικύρωση σχήματος HBase για HBaseWriter.
• Ενημέρωση προεπιλεγμένα αρχεία ρυθμίσεων Chukwa να χρησιμοποιήσετε SocketAdaptor για Hadoop μετρήσεις ροής.
• ορθογραφικό έλεγχο διαμόρφωσης.
• Σε εφαρμογή γραφικών παραστάσεων υπόλοιπο API και γραφική εξερευνητής για τη χάραξη δεδομένων HBase στο γράφημα.
• Εφαρμόζεται Syslog Adaptor για mappig όνομα εγκατάσταση syslog για να Chukwa τύπου δεδομένων.
• Αντικαταστάθηκε συλλογή των μετρήσεων του συστήματος με sigar.
• Προστέθηκε HBaseWriter για την αποθήκευση των δεδομένων χρονοσειρών σε HBase για ταχύτερη τυχαία ανάγνωσης / εγγραφής.
• Κάντε προεπιλεγμένο επεξεργαστή ρύθμισης.
• Δράσεις υποστήριξης HTTP σκανδάλη.
• Προστέθηκε JMSAdaptor.
• Υποστήριξη μετά demux σκανδάλη.

Τι είναι καινούργιο στην έκδοση 0.4.0:

• Η συλλογή των σεναρίων κελύφους στο / bin υπήρξε σημαντικά σε σύγκριση προς τα κάτω. Για παράδειγμα, αντί να bin / πράκτορα, θα πρέπει τώρα να πούμε bin / παράγοντα Chuka.
• Είναι δυνατόν τώρα να απενεργοποιήσετε απομακρυσμένες συνδέσεις προς τον παράγοντα Chukwa. Το γεγονός αυτό καθιστά Chukwa πιο κατάλληλο για χρήση σε πελάτες που αντιμετωπίζουν την ανάπτυξη
• Chukwa τώρα περιλαμβάνει έναν προσαρμογέα για την ανάγνωση των δεδομένων μέσω ενός θύρα UDP, το UDPAdaptor. Αυτό θα πρέπει να διευκολύνει την ενσωμάτωση με το syslog και παρόμοια κληρονομιά εργαλεία.
• Υπήρξαν μια σειρά από διορθώσεις σφαλμάτων και καθαρισμούς κωδικό από την τελευταία κυκλοφορία? ελέγξτε το changelog και JIRA για λεπτομέρειες.

Απαιτήσεις :

• Java 1.6 ή νεότερη έκδοση
• Apache Hadoop 0.20.205.1 ή υψηλότερη
• Apache HBase 0.90.4 ή νεότερη έκδοση